one_hot就是直接的信息数字化,但是无非表示直接的关联关系
GLOVE就是同时出现的次数越多,则相关性越大
不同词的输入的维度一致
为了保持训练的过程参数一致,随机初始值一致,然后更新的增量一致即可
通过向量话,不同词义直接的相关性彻底展现出来了
词袋法,只是统计词频,忽略了上下文的语义关系,没法很好的进行语义建模,语义建模需要向量化
李宏毅机器学习_10-2无监督学习-词语嵌入
最新推荐文章于 2021-11-06 14:41:14 发布
one_hot就是直接的信息数字化,但是无非表示直接的关联关系
GLOVE就是同时出现的次数越多,则相关性越大
不同词的输入的维度一致
为了保持训练的过程参数一致,随机初始值一致,然后更新的增量一致即可
通过向量话,不同词义直接的相关性彻底展现出来了
词袋法,只是统计词频,忽略了上下文的语义关系,没法很好的进行语义建模,语义建模需要向量化