初识词性标注:条件随机场CRF是什么,CRF与HMM的区别

本文介绍了条件随机场(CRF)的基础概念,特别是线性链CRF,并通过特征函数阐述了其工作原理。同时,文章对比了CRF与HMM在词性标注任务中的区别,指出HMM是生成式模型,而CRF是判别式模型,后者更注重标注序列的正确性概率。
摘要由CSDN通过智能技术生成

基于HMM+维特比算法的词性标注解读,可以看我的这篇原创博文
条件随机场的解读
词性标注任务

首先理解条件随机场:

条件随机场:Conditional Random Fields
定义一组特征函数
对于一个标注好的序列,给它打分:
	对于一个特征函数,计算这个序列的所有位置的该特征函数值,求和;作为该标注好的序列在第j个特征函数上的得分fun[j]
	对于所有的特征函数,加权求和,第j个特征函数的权重w[j]*得分fun[j],和作为该序列的得分
将求和的值转化为概率值,就是这个标注好的序列是正确的概率p

马尔可夫过程:

在特定条件下,系统在时间t的状态只与其在时间t-1的状态相关 。这一随机过程称为马尔可夫过程

#定义CRF中的特征函数
现在,我们正式地定义一下什么是CRF中的特征函数,所谓特征函数,就是这样的函数,
它接受四个参数:

  • 句子s(就是我们要标注词性的句子)
  • i,用来表示句子s中第i个单词
  • l_i࿰
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值