weixin_57351447的博客

原创 初识LLM

像之前比较火的GPT-3就拥有1750亿的参数，还有拥有5400亿参数的PaLM，相比于之前的3.3亿参数的BERT和1.5亿参数的GPT-2，尤其是在处理复杂任务的过程中合格，上述的两种模型展现出更惊人的潜力，也就是我们所说的“涌现能力”。LLM在许多领域产生了深远的影响。2.2.1 巨大的规模：LLM通常具有巨大的参数规模，可以达到数十亿甚至数千亿的参数，使得能够捕捉更多的语言知识和复杂的语法结构。最重要的是，LLM的出现让我们重新思考通用人工智能的可能性，也引发着对未来人工智能的探索。