机器学习
文章平均质量分 75
Allan Jie
自然语言处理,新加坡科技与设计大学博士。目前在字节跳动NLP Scientist
展开
-
语言模型在数学解题中思维链(Chain-of-Thought)设计
大模型在数学解题中CoT的设计原创 2023-12-14 22:02:43 · 868 阅读 · 1 评论 -
R语言实现viterbi算法
最近初学HMM(Hidden Markov Model),老师让我自己试着用Java去实现viterbi算法,结果试了一下,发现数据的输入太麻烦,因为数据集是一些各种字符串和标点符号的矩阵吧,然后才开始学习R语言的, 首先先看看数据集。http://www.clips.uantwerpen.be/conll2000/chunking/数据集是从上面这个网站下载的,有一个train.tx原创 2013-12-31 12:50:27 · 3762 阅读 · 7 评论 -
机器学习文本分类Improved Iterative Scaling算法以及JAVA实现
IIS算法数学理论背景IIS算法主要用来计算参数估计的maximum-likelihood。 这篇文章主要是解读Adam Berger的算法(IIS Algorithm)。首先这里采用的是概率模型。其中参数解释:表示再输入文档是x的情况下,输出label为y的概率。(在Adam的文章中这个是表示language modeling的一个句子概率问题,但是这里用于文本分原创 2014-02-12 12:46:09 · 3295 阅读 · 5 评论 -
隐马尔科夫模型中的Forward-backward算法和java的实现
理论知识实现这个算法的时候遇到很多困难,因为当时连输入是什么,输出是什么都不知道。而且很多人把forward-backward算法和baum-welch两个算法等同起来了。所以我想先整理一下一些理论的知识。HMM三个基本问题在给定的模型中\lambda (A,B,\pi)原创 2014-01-05 16:25:55 · 5112 阅读 · 4 评论