词向量
三·川
这个作者很懒,什么都没留下…
展开
-
ELMo论文解读——原理、结构及应用
论文地址:https://arxiv.org/abs/1802.053651、引言词向量是自然语言处理任务中非常重要的一个部分,词向量的表征能力很大程度上影响了自然语言处理模型的效果。如论文中所述,词向量需要解决两个问题: (1)词使用的复杂特性,如句法和语法。 (2)如何在具体的语境下使用词,比如多义词的问题。 传统的词向量比如word2vec能够解决第一类问题,但是无法解决第...原创 2019-01-26 12:00:01 · 12533 阅读 · 1 评论 -
ELMO中文词向量训练及使用的完整流程
笔者最近在学习elmo中文的词向量训练及使用,由于网上相关资料比较缺乏,学起来比较吃力。现将相关学习过程记录如下,希望后来者可以少走些弯路。(免责声明:笔者也处于初学阶段,不能保证本文的过程及结果正确)本文elmo词向量的训练主要参考:https://github.com/searobbersduck/ELMo_Chin但该代码有些问题,训练过程中陷入了死循环,笔者一直找不到问题出在哪,后来...原创 2019-03-24 20:14:20 · 9752 阅读 · 3 评论