三、我们能研究什么?
在大模型时代,可以考虑深挖的方向,供大家参考:
3.1 Retrieval augmented in-context learningGPTs完成了NLP范式的更新迭代:从传统的有监督学习(Supervised Learning)转变为语境学习(In-context Learning)有监督学习语境学习针对一个细分领域内的数据,从零开始训练模型;基于LLM完成预训练,固定参数;在不改变模型参数的前提下完成任务预测和输出;可以看出LLM的研究进一步带出了语境学习、Prompt工程,也进一步完成了NLP范式的更新迭代。那么,LLMs是否真的可以替代NLP现有的研究呢,视频从5个维度给我们分析了现有LLM解决方案的优、劣势。
作者:NLPer-CH7au
链接:https://zhuanlan.zhihu.com/p/616218740
来源:知乎
著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。