【自然语言处理】词性标注(北大,宾州)

词性标注规范

前言

         词性标注在中文领域暂无统一的标注标准,最常见较为主流的是北大宾州词性标注集。

北大词性标注集

词性编码词性名称注解
Ag形语素形容词语素。形容词代码为a,语素代码为g前面置以A
a形容词取英语形容词adjective的第1个字母
ad副形词直接作状语的形容词。形容词代码a和副词代码d并在一起
an名形词具有名词功能的形容词。形容词代码a和名词代码n一起
b区别词取汉字“别”的声母
c连词去英语连词conjunction的第1个字母
Dg副语素副词性语素。副词代码为d,语素代码g前面置以D
d副词取adverb的第2个字母,因其第1个字母已用于形容词
e叹词取英语叹词exclamation的第1个字母。
f方位词取汉字“方”
g语素绝大多数语素都能作为合成词的“词根”,取汉字“根”的声母
h前接成分取英语head的第1个字母
i成语取英语成语idiom的第1个字母
j简称略语取汉字“简”的声母
k后接成分
l习用语习用语尚未成为成语,有点“临时性”,取“临”的声母
m数词取英语numeral的第3个字母,n,u已有他用
Ng名语素名词性语素。名词代码为n,语素代码g前面置以N
n名词取英语名词noun的第1个字母
nr人名名词代码n和“人(ren)”的声母并在一起
ns地名名词代码n和处所词代码s并在一起
nt机构团体“团”的声母为t,名词代码n和t并在一起
nz其他专名“专”的声母的第1个字母为z,名词代码n和z并在一起
o拟声词取英语拟声词onomatopoeia的第1个字母。
p介词取英语介词prepositional的第1个字母
q量词取英语quantity的第1个字母
r代词取英语代词pronoun的第2个字母,因p以用于介词
s处所词取英语space的第1个字母
Tg时语素时间词性语素。时间词代码为t,在语素的代码g前面置以T
t时间词取英语time的第1个字母
u助词取英语助词auxiliary
Vg动语素动词性语素。动词代码为v。在语素代码g前面置以V
v动词取英语动词verb的第1个字母。
vd副动词直接作状语的动词。动词和副词的代码并在一起。
vn名动词指具有名词功能的动词。动词和名词的代码放在一起。
w标点符号
x非语素字非语素字只是一个符号,字母x通常用于代表未知数、符号
y语气词取汉字“语”的声母
z状态词取汉字“状”的声母的前一个字母。
un未知词不可识别词及用户自定义词组。取英文Unknown首两个字母。

说明:在有些书中比如《python自然语言处理实战核心技术算法》这本书中,对于北大词性标注集的介绍的标记全是小写。这在此文中get到Ag,Dg,Ng, Vg四处是如此的写法。

宾州词性标注集

标记英语解释中文解释
ADadverbs副词
ASAspect marker体态词,体标记(例如:了,在,着,过)
BA把 in ba-const“把”,“将”的词性标记
CCCoordinating conjunction并列连词,“和”
CDCardinal numbers数字,“一百”
CSSubordinating conj从属连词(例子:若,如果,如…)
DEC的 for relative-clause etc“的”词性标记
DEGAssociative联结词“的”
DERin V-de construction, and V-de-R“得”
DEVbefore VP
DTDeterminer限定词,“这”
ETCTag for words, in coordination phrase等,等等
FWForeign words例子:ISO
IJinterjetion感叹词
JJNoun-modifier other than nouns
LBin long bei-construction例子:被,给
LCLocalizer定位词,例子:“里”
MMeasure word(including classifiers)量词,例子:“个”
MSPSome particles例子:“所”
NNCommon nouns普通名词
NRProper nouns专有名词
NTTemporal nouns时序词,表示时间的名词
ODOrdinal numbers序数词,“第一”
ONOnomatopoeia拟声词,“哈哈”
PPreposition (excluding 把 and 被)介词
PNpronouns代词
PUPunctuations标点
SBin long bei-construction例子:“被,给”
SPSentence-final particle句尾小品词,“吗”
VAPredicative adjective表语形容词,“红”
VCCopula系动词,“是”
VE有 as the main verb“有”
VVOther verbs其他动词
  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

贾继康

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值