知识图谱
月满星沉
cver & nlper。
展开
-
【NLP学习笔记】文本分类概述
文本分类问题给定文档p(可能含有标题t),将文档分类为n个类别中的一个或多个。文本分类应用常见的有垃圾邮件识别、情感分析、新闻文本分类。文本分类方向主要有二分类,多分类,多标签分类。文本分类方法传统机器学习方法(贝叶斯,svm等),深度学习方法(fastText,TextCNN等)。文本分类流程文本分类的处理大致分为文本预处理、文本特征提取、分类模型构建等。和英文文本处理分类相比,中文文本的预处理是关键技术。参考资料[1] 文本分类概述(nlp).[] [] [] [] [原创 2020-07-12 10:37:04 · 944 阅读 · 1 评论 -
【NLP学习笔记】停用词(stop words)
此坑待填停用词1 定义2 介绍3 功能4 种类5 引用1 定义2 介绍3 功能4 种类5 引用[1] 停用词[2] 自然语言处理-停用词[3] Github-stopwords[4] 扫雷大军:为什么你不应该去除停用词?[] [] [] [] [] [] ...原创 2020-06-10 16:45:53 · 2775 阅读 · 1 评论 -
《知识图谱》阅读笔记(七)
7.4 事件关系抽取7.4.1 事件共指关系抽取7.4.1 事件因果关系抽取7.4.1 子事件关系抽取子事件关系反映了时间之间的粒度和包含关系。7.4.1 事件时序关系抽取7.5 小结...原创 2019-08-11 15:21:30 · 249 阅读 · 0 评论 -
【NLP学习笔记】语义角色标注 (Semantic Role Labeling, SRL)
SRL是一种浅层的语义分析技术,标注句子中某些短语为给定谓词的论元 (语义角色) ,如施事、受事、时间和地点等。其能够对问答系统、信息抽取和机器翻译等应用产生推动作用。 仍然是上面的例子,语义角色标注的结果为:其中有三个谓词提出,调研和探索。以探索为例,积极是它的方式(一般用ADV表示),而新机制则是它的受事(一般用A1表示)核心的语义角色为 A0-5 六种,A0 通常表示动作的施事,A...原创 2019-08-10 10:38:12 · 5529 阅读 · 0 评论 -
【NLP学习笔记】词性标注(Part-of-speech Tagging, POS)
POS是给句子中每个词一个词性类别的任务。 这里的词性类别可能是名词、动词、形容词或其他。 下面的句子是一个词性标注的例子。其中,v代表动词、n代表名词、c代表连词、d代表副词、wp代表标点符号。词性作为对词的一种泛化,在语言识别、句法分析、信息抽取等任务中有重要作用。 比方说,在抽取“歌曲”的相关属性时,我们有一系列短语:儿童歌曲欢快歌曲各种歌曲悲伤歌曲……如果进行了词性...原创 2019-08-10 10:13:49 · 3781 阅读 · 0 评论 -
【NLP学习笔记】中文分词(Word Segmentation,WS)
中文分词指的是将汉字序列切分成词序列。因为在汉语中,词是承载语义的最基本的单元。分词是信息检索、文本分类、情感分析等多项中文自然语言处理任务的基础。切分歧义是分词任务中的主要难题。 LTP的分词模块基于机器学习框架,可以很好地解决歧义问题。同时,模型中融入了词典策略,使得LTP的分词模块可以很便捷地加入新词信息。...原创 2019-08-10 10:06:17 · 799 阅读 · 0 评论 -
依存句法分析
一、句法分析句法分析是自然语言处理中的关键技术之一,其基本任务是确定句子的句法结构或者句子中词汇之间的依存关系。主要包括两方面的内容:一是确定语言的语法体系,即对语言中合法的句子的语法结构给与形式化的定义;二是句法分析技术,即根据给定的语法体系,自动推导出句子的句法结构,分析句子所包含的句法单位和这些句法单位之间的关系。二、语法体系句法分析需要遵循某一语法体系,根据该体系的语法确定语...原创 2019-08-10 09:56:33 · 2333 阅读 · 0 评论 -
《知识图谱》阅读笔记(六)
6 关系抽取不同的关系将独立的实体连接在一起编织成知识图谱。6.1 任务概述6.1.1 任务定义关系定义为两个或多个实体之间的某种联系,关系抽取就是自动识别实体之间的某种语义关系。根据参与实体的多少可以分为二元关系抽取和多元关系抽取,其中二元关系是指两个实体间的关系,多元关系指的是三个及以上实体间的关系。二元关系抽取是其他关系抽取研究的基础。6.1.2 任务分类根据处理数据...原创 2019-08-09 20:34:24 · 375 阅读 · 0 评论 -
《知识图谱》阅读笔记(九)
9.1 知识图谱中的典型推理任务9.1.1 知识补全9.1.2 知识问答9.2 知识推理分类9.2.1 归纳推理和演绎推理9.2.1.1 归纳推理归纳是从特殊到一般 的过程。所谓归纳推理,就是根据部分对象所具有的的性质,推出一类事物中所有对象都具有这类性质的推理方式。其一般分为三个步骤:(1)对部分资料进行观察、分析和归纳整理;(2)得出规律性结论,即猜想;(3)检验猜想;计...原创 2019-08-13 22:37:09 · 338 阅读 · 0 评论 -
【NLP学习笔记】知识图谱阅读笔记及其心得
《知识图谱》阅读笔记系列(5)第五章 实体消歧5.1 任务概述5.1.1 任务定义5.1.2 任务分类5.1.3 相关评测5.2 基于聚类的实体消歧方法5.2.1 基于表层特征的实体指称项相似度计算5.2.2 基于扩展特征的实体指称项相似度计算5.2.3 基于社会化网络的实体指称项相似度计算5.3 基于实体链接的实体消歧方法5.3.1 链接候选过滤方法5.3.2 实体链接方法5.4 面向结构化...原创 2019-08-08 12:56:59 · 1169 阅读 · 0 评论