句法分析

本文详细介绍了句法分析的各个方面,包括短语结构分析的线图和CYK算法,概率上下文无关文法(PCFGs),以及依存句法分析的基本理论和优势。此外,还讨论了句法分析器的性能评估指标和短语结构与依存结构的关系。
摘要由CSDN通过智能技术生成

句法分析

一,概述

任务:句法分析的任务就是识别句子的句法结构

类型有:

  • 短语结构分析
    • 完全句法分析
    • 局部句法分析
  • 依存句法分析

二,短语结构分析

目标:实现高正确率、高鲁棒性、高速度的自动句法分析过程。

困难:自然语言中存在大量的复杂的结构歧义

结构歧义中最常见的就是介词短语绑定歧义。

基本方法:

  • 基于CFG规则的分析方法
    1. 线图分析法
    2. CYK算法
  • 基于PCFG的分析方法
1,线图分析法

三种策略:

  • 自底向上
  • 从上到下
  • 从上到下和从下到上结合
自底向上的线图分析算法
2,CYK分析算法

三,概率上下文无关文法(PCFGs)

它也属于短语结构分析。

1,PCFG规则

形式: A → α , p A\rightarrow\alpha,p Aαp

约束: ∑ α p ( A → α ) = 1 \sum_{\alpha}p(A\rightarrow \alpha)=1 αp(Aα)=1

2,计算句法分析树概率的基本假设
  • 位置不变性
  • 上下文无关性
  • 祖先无关性

四,PCFG的三个问题

  1. 给定句子 W = w 1 w 2 … w n W=w_1w_2…w_n W=w
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值