xingjiu_08的博客

原创 LLM学习笔记

LLMs大致可分为两类：基础LLM(Base LLM)和指令调优LLM(Instruction-Tuned LLM)。● 基础LLM是通过从互联网和其他渠道获得的大量数据进行预训练，可以根据文本训练数据预测下一个单词的基础模型。● 指令调优LLM是在基础LLM之上进一步训练它，根据用户输入的指令(输入)以及回答(输出)的反馈进行优化，让其尽量遵循这些指令，更加符合具体的场景。