人工智能大模型领域的新探索

2024-07-18 00:00初宪
新阅读 2024年6期

大模型技术的快速发展始于2018年,Transformer模型的提出为大模型训练奠定了基础。随后,GPT系列模型的推出进一步推动了这一领域的发展。从GPT-1到GPT-4,模型参数量从1.17亿增长到千亿级,模型能力也在不断提升。在这一背景下,智谱AI紧跟国际前沿,于2018年开始研发GLM系列模型。智谱AI研发的新一代认知智能大模型——GLM系列,目标是通过GLM系列模型的研发,推动中国人工智能技术的进步,开启出版行业的新纪元。GLM系列模型是智谱公司自主研发,拥有自主知识产权,全面对标OpenAI GPT的产品系列。

大模型技术的发展带来了显著的性能提升,同时也带来了技术挑战。首先是模型架构的自主化,其次是训练推理的国产化,最后是内容生成的可控化。

智谱AI研发的千亿对话模型ChatGLM在国际测评中取得了显著成绩。在44项国际测评集同参数规模排名首位。最新推出的GLM-4模型,在多语言、数学推理、中英文指令遵从方面表现接近GPT-4,中文对齐能力超过GPT-4。智谱AI的ChatGLM开源社区下载量超过1300万次,在GitHub累计获得6万星标。同时,在科技部发布的《中国人工智能大模型地图研究报告》中,ChatGLM位列开源大模型影响力第一名。

智谱AI研发的全新自主预训练框架——GLM,统一了自然语言理解和生成任务,能够同时学习上下文表示和自回归生成。GLM-130B在斯坦福大学的世界主流大模型评测中表现出色,是亚洲唯一入选的模型。其准确性和恶意性与GPT-3 175B接近,在鲁棒性和校准误差方面在所有评测模型中表现最佳。

智谱AI的对话模型家族也在快速发展,新一代基座模型GLM-4在多模态能力方面达到了DALL·E3的90%以上水平,中文能力超过了GPT-4。它支持更长的上下文表示、更强的多模态支持,以及更快速的推理等。智谱AI的大模型开源生态自2023年3月14日开源以来,ChatGLM-6B及其后续版本获得了广泛应用。在Hugging Face平台上,下载量超过1300万次,并在GitHub上获得了6万星标。

智谱AI与四十余家国产芯片厂商建立了合作关系,实现了模型在多款国产芯片上的高效运行。与多家数据合作伙伴和业务伙伴建立了紧密的合作关系,共同推动两千余家用户进入生成式AI的第二阶段。智谱AI的生成式AI服务“智谱清言”是首批国家网信办审核通过上线的大模型之一。它具备创意写作、数学计算、AI绘图、科普问答、编程等全方面综合能力,下载量dMh/BLWEHjn1XiVv/mK93azZNZZ4I1KyucbnmxCciEU=已超千万。大模型的出现对知识获取方式产生了深远影响。它可以在帮助人类自动调用工具方面发挥重要作用。以GLM-4为例,它可以实现多工具的自动调用。

大模型对学习方式的改变也是显而易见的。它可以辅助用户进行翻译与本地化,帮助理解专业术语;可以解释复杂概念,辅助用户学会提问;还可以根据用户需求提供个性化学习路径。大模型在内容创作方面的应用可以加速创作过程,帮助用户快速生成高质量的内容;可以模仿不同风格,实现风格的转换;还可以进行角色扮演和互动,提供更有趣的创作体验。

Aminer大模型学习助手在论文、报告、书籍方面的应用显著提高了研究效率。它可以帮助用户快速检索和筛选相关文献,从而加速研究进程。通过分析大量文献和学术数据,Aminer可以发现潜在的学术热点和前沿领域,为用户提供有价值的学术洞见。

总结来说,智谱AI的GLM系列大模型在技术创新、应用推广和国际影响力方面取得了显著成就。它们不仅在技术上对标国际先进水平,而且在实际应用中展现了强大的性能和广泛的影响力。智谱AI将继续致力于大模型技术的发展,推动人工智能领域的进步,为各行各业提供更强大的AI支持。

作者系智谱AI传媒教育出版行业总经理