中文分词之姓名标注

前言:

谈到中文分词,前些年我可能感觉有点可望而不可即,不过现在倒是有这个自信和大家吹吹水了。不久前根据自己已有的原材料写了一个分词并标注姓名的小程序,因为和ictclas有些不同,故此分享出来。ictclas被研究的很多了,我没有去看源码,看了几个不同版本的分析;因为之前也看过《算法导论》和《数据结构》,倒是没有什么理解上的困难。他大体分为4个主要步骤:原子切分、top-N最优路径粗切分、未登陆此识别(姓名的识别就含在此内了)、二元优化切分,数据结构则是采用的字典hash+二叉树。

ictclas的词性标注

先介绍一篇博文 http://blog.csdn.net/dancefire/article/details/1606603 《中科院中文分词系统ICTCLAS之人名识别词典分析》。这姓名标记方法中,咋一看还是有些复杂:步骤很多,需要考虑情况很多。但是分词中用到的知识是很有限的:某一些词的后面比较容易出现姓名(如:他

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值