mwcxz的博客

再把目光跳出NLP领域，CNN对图像的编码，GCN对图的编码，也都是在做同样的事情，甚至是数据建模中，人工特征工程的构建，也是为了寻求一众更合理的特征表示方法。​ 正是由于这种固有的特性，好多人，包括我自己在内，在提到BERT之类的模型时，总是给它加上一个后缀“编码器”，因为心里已经习惯了这样的思想，​ 再把时间放的久一点，回顾技术的发展，似乎可以发现，整个机器学习的发展，好像一直都在围绕着“表征”进行的。，因为不管是什么样的任务，都在获取表征的基础上，去设计具体的下游任务。

Huggingface NLP笔记