目录
分布表示(Distributional Representation)
分布式表示(Distributed Representation)
CBOW模型(Continuous Bag-of-Words Model)
Skip-gram模型(Continuous Skip-gram Model)
Glove(Global Vectors for Word Representation)
PV-DM模型(Paragraph Vector Distributed Memory Model)
PV-DBOW模型(Paragraph Vector Distributed Bag-of-Words Model)
这两天将word2vec和doc2vec的一些相关模型捋了一遍,觉得有必要将它们放在一起做个总结,一方面它们做的事情类似,放在一起比较合适;另一方面,加深对各个模型思想的理解,方便以后随时查看。对本文参考的诸多大牛的文献一并感谢,图中使用了文献中的部分图片,具体文献名称如下:
《A Neural Probabilistic Language Model》
《Effificient Estimation of Word Representations in Vector Space 》
《Distributed Representations of Sentences and Documents》
《Word2Vec (Part 1): NLP With Deep Learning with Tensorflow (Skip-gram)》