常见的两种微调策略分别是增量预训练和指令跟随。 其中增量预训练是指给模型投喂一些新知识，这些新知识是目标领域有关的文本内容，让基底模型学习到一些新知识。而指令跟随是指让模型学会对话模板，根据人类指令进行对话。下图解释了增量微调和指令微调的区别：
三种微调方式对比：
书生-浦语大模型_第三次作业笔记
最新推荐文章于 2024-08-14 10:10:06 发布
389
评论 1
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
添加红包
