从句法树中提取特征

最新推荐文章于 2022-07-06 10:21:15 发布
最新推荐文章于 2022-07-06 10:21:15 发布
阅读量799 收藏 2
点赞数
分类专栏： nlp
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_41610436/article/details/102566290
版权

句法树

我们把一个句子构建成语法树(CKY算法构建)
S
NP
NP
N
Microsoft
V
VP
is
V
PP
located
P
N
in
USA

NP：名词短语
P：介词
PP：介词短语
V：动词
N：名词

内部节点都是可以拆分的，叶子节点不可以拆分

从句法树中提取特征

除了一般的特征工程之外，还可以从里面提取一些特征。

  • 我们面对的是一棵树，所以我们可以提取最大路径
  • 再比如我们关注的点在Microsoft上，我们也可以挖掘一些从S->Microsoft的路径

往往这些特征承担的重要性不大，而且句法特征起到的作用很小，但是当我们处理很短的句子的时候，我们可以提取的特征是十分有限的，这时可以加入一下句法特征。

笑给我看
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
[网络安全提高篇] 一一四.Powershell恶意代码检测 (2)抽象语法树自动提取万字详解
杨秀璋的专栏
03-13 8883
这是作者网络安全自学教程系列，主要是关于安全工具和实践操作的在线笔记，特分享出来与博友们学习，希望您喜欢，一起进步。前文简单介绍了PowerShell、Powershell恶意代码检测总结及抽象语法树（AST）提取，主要从论文的角度讲解。这篇文章将详细介绍抽象语法树的抽取方法，通过官方提供的接口实现，包括抽象语法树可视化和节点提取。希望这篇文章对您有帮助，也推荐大家去阅读论文，且看且珍惜。
【ML】特征提取3种基本方法
越努力，越幸运
08-06 1792
作者：hellpppp 链接：https://www.jianshu.com/p/7f3502cf9cae 来源：简书 注意：评论中有人指出，这是特征选择方法，我也布吉岛鸭 附：特征提取VS特征选择https://wenku.baidu.com/view/517e175d905f804d2b160b4e767f5acfa0c78363.html 嵌入（embed）：学习算法中本来就包含有...
基于句法分析的评论观点提取技术
u013280491的博客
05-19 3798
目录1、概述2、句法分析3、观点抽取 1、概述 随着互联网特别移动互联网带给人们的便利性应用，越来越多的生活场景可以在线完成，比如，网上购物、网上政务、互联网娱乐等等，那么，很多应用场景都会开放平台和用户的交互，比如，浏览新闻是可以基于新闻内容阐述个人观点，网上购物时可以对购买的物品进行评价。 那么，用户的交互式评论对平台相关内容的改进起到很大作用，然而，随着应用的普及，海量交互式评论的分析成为一种挑战，如何对评论进行自动化观点抽取成为必不可少的需求。 2、句法分析 在此，针对观点抽取，本文阐述基于句法分析
句法分析树标注集
qq_19472829的博客
04-26 1222
ROOT：要处理文本的语句 IP：简单从句 NP：名词短语 VP：动词短语 PU：断句符，通常是句号、问号、感叹号等标点符号 LCP：方位词短语 PP：介词短语 CP：由‘的’构成的表示修饰性关系的短语 DNP：由‘的’构成的表示所属关系的短语 ADVP：副词短语 ADJP：形容词短语 DP：限定词短语 QP：量词短语 NN：常用名词 NR：固有名词 NT：时间名词 PN：代词 VV：动词 VC：...
十八、神奇算法之句法分析树的生成
jiangjingxuan的博客
01-25 1万+
把一句话按照句法逻辑组织成一棵树，由人来做这件事是可行的，但是由机器来实现是不可思议的，然而算法世界就是这么神奇，把一个十分复杂的过程抽象成仅仅几步操作，甚至不足10行代码，就能让机器完成需要耗费人脑几十亿脑细胞的工作，本文我们来见识一下神奇的句法分析树生成算法 请尊重原创，转载请注明来源网站www.shareditor.com以及原始链接地址 句法分析 先来解释一下句法分析。句法分析分为句
依存句法树解析（Stanfordnlp、nltk）
最新发布
09-28
## 使用Stanfordnlp和nltk进行**依存句法分析**,提取动名词短语 分词之后名词动词合并成chunking短语 主函数：sentenceSplit_host.py 输入：text.txt 输出：dependency.txt ## 主要步骤 通过读取text.txt文本...
篇章结构提取特征
03-01
在篇章结构特征提取中，我们可以关注以下几个关键点： 1. **段落划分**：篇章是由多个段落组成的，每个段落通常包含一个主要的观点或主题。通过识别和分割段落，我们可以获取篇章的基本结构。 2. **主题句识别**：...
基于合一句法和实体语义树的中文语义关系抽取
02-23
该方法通过在关系实例的结构化信息中加入实体语义信息,如实体类型、引用类型和GPE角色等,从而构造能有效捕获结构化信息和实体语义信息的合一句法和实体语义关系树,以提高中文语义关系抽取的性能。在ACE RDC 2005中文...
基于词向量与句法树的中文句子情感分析_相若晨1
08-04
在情感分析中，句法树可以帮助识别情感词（如形容词、动词）及其修饰语，从而更准确地理解句子的情感色彩。通过对句法树的遍历和分析，可以确定情感焦点，比如找出带有强烈情感色彩的短语或从句，进而判断整个句子的...
基于句法决策树和SVM的短文本语境识别模型
09-05
- **应用**：在短文本语境识别任务中，SVM被用来对经过句法决策树处理后的特征进行分类，以此识别不同的语境。 - **优势**：SVM特别适用于小样本数据集，并且能够处理非线性可分的情况，这使得它非常适合于短文本...
第七章 句法分析
weixin_46365033的博客
12-14 6115
文章目录概述短语结构分析线图分析法*自底向上的线图分析法（基于CFG）点规则数据结构算法描述扩展弧子程序：题型十六：使用线图分析法构建语法分析树我对于算法的过程理解算法评价CYK算法 概述 任务：句法分析的任务就是识别句子的句法结构。 句法分析分为句法结构分析和依存关系分析。 句法结构分析又可以称为短语结构分析；获取整个句子的句法结构为目的的句法分析称为完全句法分析；获得局部成分为目的的句法分析称为局部句法分析。 依存关系分析又称为依存结构分析。 短语结构分析 句法结构分析的定义是：对输入的单词序列判断其构
NLP词性分析，实体分析，句法树构造（依存句法树分析）
热门推荐
jiangchao98的博客
07-30 1万+
使用scipy库 和 nltk库进行抽取单词的 词性信息 和 实体信息
句法分析详解
li15006474642的博客
03-07 1万+
首先在了解句法分析，我们先来思考一个问题：人是怎样理解一个句子的？ 1、从语法的角度（主谓宾） 2、从感觉的角度（语言模型） 所以句法分析理解起来很简单，就是从语法的角度分析每个词之间的关系，在一句话中那个词是主语，那个词是谓语，等等而且用树的形式来表示。 假设现在有一句话： 北京是属于中国的 那么用句法分析后就是下图的样子： 我们先不管怎么构成这样的一个句法树，我们先看一下这棵树的特点： 叶子...
使用StanfordCoreNLP的句法树以及NLTK的Tree建立DGL的图数据结构
学习笔记
07-06 1445
因为其实Tree-LSTM的数据类型构造起来也是比较麻烦的，还是要记录一下，以防之后忘记因为前面一篇写的Tree-LSTM是用DGL实现的，那么图数据结构自然也要用DGL来操作一下，不然喂不进去啊。构建数据集的样子是按照DGL自带的SSTDataset(mode=‘tiny’)来的，因为这样我就可以直接放进去训练了。我是使用句法树来构建的，因为句法树并不止二叉，因此模型使用Child-sum Tree-LSTM会比较合适。 例如： 这么一颗句法树，因为DGL使用序号来标注节点的，那么其实我也需要转成序号才
指代消解
九久的博客
03-06 397
解决一段文字中代词的指代。 其实这类问题是一个经典的二分类问题，只需要判断0和1 解决办法： 1、最简单的办法：将代词指为离该代词最近的词 2、基于有监督的学习方法。 （1）、收集数据 （2）、构造分类器 （3）提取特征 句法分析： 理解一个句子，有两种方法： 1、结构分析 主谓宾 2、凭感觉 （基于语言模型） 结构分析法： 将句子的结构分为一颗语法树，该语法树以主语为树根，如下图所示： 其中叶子结点称为：terminals 中间结点为inter node 怎么从语法树中提取特征？根据父
NLP学习笔记32-句法分析、
bohu83的博客
03-09 1515
一 序 本文属于贪心NLP训练营学习笔记。 二句法分析Parsing 理解句子的两种方法: 句法分析 (主谓宾…) 大量阅读后, 凭感觉 <- 语言模型 概念 例如. Microsoft is located in Redmond 上面的语法树中，叶子节点叫terminal node，非叶子节点叫internal node（non-terminal node） 句法树中提取特征Parsing for Feature Extraction 提取与 树/图 的相关特征 (重要性..
依存句法树解析
weixin_38241876的博客
05-05 7960
#encoding=utf8 import re,os,json from stanfordParse import pos from stanfordParse import parse_sentence from recursionSearch import search def split_long_sentence_by_pos(text): del_flag=['DEC','A...
自然语言处理之——句法分析
xi_xiyu的博客
01-26 1554
一．摘要 在自然语言处理的一个重要分支领域——机器翻译中，句法分析占据着核心的地位，句法分析也是自然语言处理的核心技术，是机器理解语言的关键部分。句法分析的主要任务是识别出句子所包含的句法成分以及这些成分之间的关系，通常会以句法树来表示句法分析的结果。本次分享将介绍句法分析相关的技术。 二．概述 句法分析是决定自然语言处理进度的关键部分。句法分析主要有一下两个障碍：歧义和搜索空间。自然语言区别于人工语言的一个重要特点就是它存在着大量的歧义现象。人们可以依靠大量的先验知识有效的消除掉歧义，而在机器学..
随机森林如何做特征提取
越努力 越幸运
07-17 1万+
转载自：https://www.cnblogs.com/xieb1994/p/9895450.html 随机森林做特征提取主要是根据：OOB（outofbag）原则去做的。 出发点：如果某个特征是重要的，那么当在此特征的数据分布式引入一定的噪声，那么用仅对此特征进行变化之后的数据进行RF训练，模型的性能应当会有较大的变化（较明显地变差）；反之，如果某个特征是不重要的，则重新训练后的模型性能...
stanfordcorenlp生成句法树
03-17
Stanford CoreNLP 是一个自然语言处理工具包，可以生成句法树。句法树是一种树形结构，用于表示句子中单词之间的语法关系。Stanford CoreNLP 可以通过分析...生成的句法树可以用于文本分析、信息提取、机器翻译等应用。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值