Linn

原创 word2vec之 cbow 和skip-gram

word2vec是google在2013年推出的一个NLP工具，它的特点是将所有的词向量化，这样词与词之间就可以定量的去度量他们之间的关系，挖掘词之间的联系。Cbow和skip-gram 是word2vec中两种关键模型，它们从不同角度来描述了周围词与当前词的关系；在cbow方法中，是用周围词预测中心词（多对一，后验），从而利用中心词的预测结果情况，使用梯度下降法，不断的去调整周围词的向量...