ChatGPT魔法5： 总结及怎么用ChatGPT帮你写程序

1. 整体回顾

1.1 GPT

第一讲简单回顾下， ChatGPT背后的原理，Prompt相当于magic，魔法棒，实际上，当我们真正理解大预言模型，我们就会了解如何使用魔法。 Chatgpt是大预言模型，基于transformer，类似与人学习一样，通过别人讲解或看书来了解每个字、每个词的不同含义，实际上不同的上下文、不同的语境每个词意思都有不同的含义。那么如何表示呢，在数学上通常是把一个词变成高维数据，当有这么多维度后，就可以适应在任何语境中。GPT能过做并行训练，类似联想输入法，输入上个，可以出很多下个，也类似中文接龙，真正做好这个需要了解很多，不只是一段话理解，深圳需要对一篇文章的理解，实际上这了解的过程就类似ChatGPT的Transformerde 训练。ChatGPT为什么叫做AGI, 是因为他真正理解了，虽然用大量GPT训练，把互联网上所有的知识都学习了。其智力是水平接近于大学生，知识水平超过任何一个人。所有人都在同一个起跑线上，谁能充分利用好GPT这种工具，会使用这个魔法，能最大提高工作效率。

关于Transformer可以参考下这篇博文：