生成式语言模型与通用人工智能：内涵、路径与启示

源自： 信息化协同创新专委会

作者：肖仰华

“人工智能技术与咨询”  发布

摘 要

以ChatGPT为代表的大规模生成式预训练语言模型带动了一系列通用人工智能（AGI: Artificial General Intelligence）技术的迅速发展。AGI已经掀起新一轮信息技术革命，成为一种先进的生产力，深入理解AGI的本质显得尤为迫切。大规模生成式语言模型为代表的通用人工智能技术，以生成式AI为主要形态，具备情景化生成能力，形成了知识、能力、价值三个阶段的智能炼就路径。随着相关技术的发展，机器的智能水平快速提升，将带来人机边界模糊及与其相关的一系列社会问题。AGI的发展路径具有“填鸭灌输”式学习、“先通再专”等特点，在一定程度上颠覆了人类对机器智能实现路径的传统认识，倒逼人类在世界建模、知识获取、自我认知等层面进行反思。人类需高度警醒AGI带来的挑战，并积极抓住其带来的机遇，推动构建新型的人机和谐关系。

前 言

什么是智能？ChatGPT何以成功？

由通用人工智能引发的人类自我审视及启示

组合泛化是一种创造，但可能是低级的创造形式。AGI之所以吸引了业界的高度关注，一个很重要的原因在于它呈现出了一定的创造能力。我们发现ChatGPT或者GPT-4，已经拥有了比较强大的组合泛化能力：大模型经过足量常见任务的指令学习，能够胜任一些新的组合任务。具体来说，大模型学会了完成a、b两类任务，它就一定程度上可以完成a＋b这类新任务。比如GPT-4能够使用莎士比亚诗词风格来书写数学定理证明。实际上这是由于GPT-4分别习得了数学证明与写莎士比亚诗词两种能力，进而组合泛化出的新能力。

声明:公众号转载的文章及图片出于非商业性的教育和科研目的供大家参考和探讨，并不意味着支持其观点或证实其内容的真实性。版权归原作者所有，如转载稿涉及版权等问题，请立即联系我们删除。