![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
词向量
Zh823275484
联系方式:18328609398@163.com
展开
-
词义消歧
词义消歧在nlp中是重要的核心问题之一,词义、句义以及篇章含义层次都会根据不同的上下文环境产生不同的意义,消歧就是指根据上下文确定对象语义的过程。词义消歧是在词语层次上的语义消歧,常常在搜索引擎、意见挖掘、文本理解与产生、推理中具有应用。一、常用的算法1、监督学习算法 a.确定词表和释义表,如目标词“bass”,有两个释义:乐器-贝斯,鱼类-鲈鱼; b.获取语料:Googl...原创 2019-03-04 14:17:18 · 7627 阅读 · 3 评论 -
词向量
词向量是自然语言处理中重要的基础,有利于我们对文本、情感、词义等等方向进行分析,主要是将词转化为稠密向量,从而使得相似的词,其词向量也相近。一、词向量的表示 词向量的表示通常有两种方式,一种是离散的,另一种是分布式的;其离散方式通常称为one-hot representation,其缺点是不能显示词与词之间的关系,但优点是在高维空间中,很多任务线性可分。 其分布式的方式通常称为...原创 2019-03-07 12:49:31 · 5565 阅读 · 0 评论 -
句子相似性
在nlp任务中,经常会遇到求解相似语句判断的场景,这就涉及到了句子的相似性判断。目前常用的两种方法是基于word-level级别和sentence-level级别。一、Word-level的思想是通过对句子进行分词,分别计算两个比较句子中所含词汇的相似度。主要包含两个核心问题,一个是词的相似度计算问题,另一个是对多个词进行相似度加权融合问题1.1 基于word的相似度计算问题 目...原创 2019-03-07 16:00:27 · 2153 阅读 · 0 评论