统计机器翻译
小小鸟要高飞
小小学生,埋头科研,岂不快哉。
展开
-
moses(mosesdecoder)数据预处理&BPE分词&moses用法总结
mosesdecoder&BPE数据预处理moses数据预处理BPE分词 moses数据预处理 源码链接: https://github.com/moses-smt/mosesdecoder 做机器翻译的小伙伴应该会moses很熟悉,这是一个很强大的数据预处理工具,虽然已经用了很多年了,但现在依然非常流行。 很多人做数据预处理都会用到BPE算法,bpe算法太强大,30000个子词几乎可以表...原创 2020-01-16 13:42:26 · 10154 阅读 · 5 评论 -
Statistical Phrase-Based Translation
Statistical Phrase-Based Translation Procee摘要评估框架2.1 模型2.2 解码器学习短语翻译的方法3.1 Phrases from Word-Based Alignments3.2 Syntactic Phrases(句法短语)3.3 Phrases from Phrase Alignments 这是基于短语的统计机器翻译中很经典的一篇文章。 摘要 我们...原创 2019-11-25 21:31:12 · 953 阅读 · 2 评论