最大熵模型求解:训练和学习

http://blog.csdn.net/pipisorry/article/details/52791036最大熵模型的训练和学习最大熵模型求解的思路和步骤最大熵模型学习的具体推导Note: 通过交换极大极小位置,即得其对偶问题。求解内部极小化问题:lagrange乘子法右边更详细的解释 从式6.22中可以看出,通过式6.22可以进行最大熵分类(x为文本d, y为类别c),只需要求解出wi参数(...
阅读(1168) 评论(0)

最大熵模型The Maximum Entropy

http://blog.csdn.net/pipisorry/article/details/52789149最大熵模型相关的基础知识[概率论:基本概念CDF、PDF ][信息论:熵与互信息 ][最优化方法:拉格朗日乘数法 ][参数估计:贝叶斯思想和贝叶斯参数估计...
阅读(1505) 评论(9)

HMM:隐马尔科夫模型-维特比算法

目标-解决HMM的基本问题之二:给定观察序列O=O1,O2,…OT以及模型λ,如何选择一个对应的状态序列S = q1,q2,…qT,使得S能够最为合理的解释观察序列O? 寻找最可能的隐藏状态序列(Finding most probable sequence of hidden states) 皮皮blog from: ref:...
阅读(679) 评论(0)

HMM:隐马尔科夫模型-前向算法

解决HMM的基本问题之一:已知HMM模型λ及观察序列O,如何计算P(O|λ)?从而评估哪一个HMM最有可能产生了这个给定的观察序列。...
阅读(956) 评论(0)

HMM:隐马尔可夫模型HMM

隐马尔可夫模型 隐马尔可夫模型(Hidden Markov Model,HMM)是统计模型,它用来描述一个含有隐含未知参数的马尔可夫过程。其难点是从可观察的参数中确定该过程的隐含参数。然后利用这些参数来作进一步的分析,例如模式识别。 在正常的马尔可夫模型中,状态对于观察者来说是直接可见的。这样状态的转换概率便是全部的参数。而在隐马尔可夫模型中,状态并不是直接可见的,但受状态影响的某些变量则是可...
阅读(2147) 评论(0)

LTP语法分析

POS词性标注解释 Tag Description Example a adjective 美丽 b other noun-modifier 大型, 西式 c conjunction连词 和, 虽然 d adverb 很 e exclamation惊叹词 哎 g morpheme形态素; 词素 茨, 甥 h prefix 阿, 伪 i idiomidiom...
阅读(1052) 评论(0)

中文句法分析

中文语法 音节 ... 词 词是由语素组成的最小的造句单位。从构成方式来看,可以分成:单纯词和合成词。从词性来看,可以分成:实词和虚词。 单纯词 由一个语素组成的词,自由的单音节语素和所有的双音节、多音节语素都可以组成单纯词。如:山、水、天、地、人、有、土、红、凑;仿佛、苍茫、蜈蚣、琉璃、参差、蹉跎;敌敌畏、阿司匹林、萨克斯、麦克风等。 合成词 由两个或两个以上的语...
阅读(3013) 评论(0)

马尔科夫模型

http://blog.csdn.net/pipisorry/article/details/46618991 马尔科夫过程 马尔科夫过程可以看做是一个自动机,以一定的概率在各个状态之间跳转。 考虑一个系统,在每个时刻都可能处于N个状态中的一个,N个状态集合是 {S1,S2,S3,...SN}。我们现在用q1,q2,q3,…qn来表示系统在t=1,2,3,…n时刻下的状态。在t=1时,系...
阅读(4183) 评论(0)

python中文分词工具:结巴分词jieba

http://blog.csdn.net/pipisorry/article/details/45311229结巴分词jieba特点    支持三种分词模式:        精确模式,试图将句子最精确地切开,适合文本分析;        全模式,把句子中所有的可以成词的词语都扫描出来, 速度非常快,但是不能解决歧义;        搜索引擎模式,在精确模式的基础上,对长词再次切分,提高召回率,适合...
阅读(3070) 评论(0)

Stanford Parser的使用——进行词法语法分析

http://blog.csdn.net/pipisorry/article/details/42976457 stanford-parser的使用 1、到斯坦福官方网站http://nlp.stanford.edu/software/lex-parser.shtml下载软件包,解压。 2、在eclipse中新建一个java project,把解压得到根目录下的sta...
阅读(8630) 评论(0)

Stanford Parser demo错误:Unsupported major.minor version 52.0 error

运行Stanford Parser demo时出现错误: Unsupported major.minor version 52.0 error 出现问题原因: JDK的问题:在eclipse中开发的项目有个java build path中可以配置的jdk,还有个java compiler中可以配置compiler level{eclipse>windows>preferenc...
阅读(46083) 评论(2)
    个人资料
    • 访问:2208498次
    • 积分:23262
    • 等级:
    • 排名:第285名
    • 原创:530篇
    • 转载:30篇
    • 译文:5篇
    • 评论:233条
    Welcome to 皮皮blog~

    博客专栏
    最新评论