BLEU: a Method for Automatic Evaluation of Machine Translation

最新推荐文章于 2024-07-30 17:23:09 发布
最新推荐文章于 2024-07-30 17:23:09 发布
阅读量347 收藏 1
点赞数
分类专栏： 深度学习 文章标签： python nlp
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_40904578/article/details/103436991
版权

 

bleu 是用来衡量机器翻译结果好坏的指标

最初的版本：

使用累加器计算candidate中词在reference中出现词的次数，除以总次数称为precision

但可能会出现以下情况：

 

此时

            p=\frac{7}{7}=1

显然这个计算方法是存在bug的

改良版：

 

可以解决大部分问题但是

p=1

所以加入短句惩罚

此处定义一个概念, 当candidate doc 长度等于任何一个reference doc的长度的时候, 我们称此时为最佳匹配

最低0.47元/天 解锁文章
SIyu Gong
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【论文笔记】BLEU: a Method for Automatic Evaluation of Machine Translation
gjh1716718326的博客
08-02 896
BLEU的意义 在计算语言学的研究实验中，研究者希望能实时对机器翻译的质量进行评估（可能每天甚至没几个小时进行一次），而人工翻译评估是无法满足这一需求的，因此机器翻译研究受到了这一瓶颈的限制，难以有所突破。 BLEU作为一种自动翻译评估方法，目的是解决这一问题。 BLEU的全拼（Bilingual Evaluation Understudy） BLUE原理 核心思想：机器翻译和人工翻译的越接近越好 实现方法：定义数字量化“接近度”的方法 必须条件：质量优秀的人工翻译语料库 举例一：n-gram匹配
机器翻译自动评价之BLEU详解-BLEU: a Method for Automatic Evaluation of Machine Translation
ac540101928的专栏
11-21 1143
摘要翻译 对机器翻译进行人工评价是广泛的，但价格昂贵。人工评价可能要数月才能完成，并且要用不能够被重复使用的人工劳动。在此提出了一种快速、便宜且语言独立的自动机器翻译评价方法，它和人工评价高度相关，并且每次运行的边际成本很低。当需要快速或频繁的评估时，我们把这种方法作为有相关技术的人工评价的自动化替代。 一、本文针对什么问题开展研究，研究的意义如何； 人工评价机器翻译质量要衡量翻译的许多方面，包括充分性、通顺性和精确性。 对机器翻译进行人工评价存在许多问题，如：①耗时长，可能需要数周甚至数月时间才能
[文献阅读] Bleu: a Method for Automatic Evaluation of Machine Translation
庖丁解牛
04-16 2722
Bleu: a Method for Automatic Evaluation of Machine Translation Author: Kishore Papineni, Salim Roukos, Todd Ward, Wei-Jing Zhu IBM Research Division Thomas J. Watson Research Center P.O. Box 218 Yor
相似度系列—2传统方法BLEU：BLEU: a Method for Automatic Evaluation of Machine Translation
Hekena的博客
11-14 389
BLEU还是有一些不足的，虽然考虑了n_grams的匹配数量，但是在句法、单词顺序、同义词方面，考虑的不是很多。后面的改进，而且，他算是单一维度的评价指标吧。虽然在开头提到需要考虑四个维度：连贯性、完整性（一元gram相同的越多时）、流畅度（最长的n_gram越长的时候）…，但在计算中，这四个维度，体现的还不是太好。
[ THUNLP-MT (2/10) ] BLEU: a Method for Automatic Evaluation of Machine Translation | NIST
世界上有很多的东西
05-16 377
本文讨论BLEU和NIST评价指标的主要原理。原论文由IBM发表于ACL'02，是老生常谈的一篇论文了。BLEU指标如今经常在机器翻译任务的评价中使用。 (被引用 8924 次。)此外，本文还讨论BLEU的变种，NIST评价指标。
BLEU : 一种机器翻译自动评价方法
人工智能
05-17 8894
BLEU : 一种机器翻译自动评价方法 BLEU：a Method for Automatic Evaluation of Machine Translation（1）  Kishore Papineni，Salim Roukos，Todd Ward, and Wei-Jing Zhu 编译： 洪洁   文章来源：多语工程技术研究中心《云翻译技术》第12期   摘要：这篇论文是关于BLE
Bleu- A method for automatic evaluation of machine translation
02-05
Bleu- A method for automatic evaluation of machine translation 论文原文
Papineni 等。 - 2001 - BLEU a method for automatic evaluation of m
08-03
因此，BLEU常被作为评估的一部分，而不是唯一标准，通常会与其他评估指标如ROUGE（Recall-Oriented Understudy for Gisting Evaluation）和METEOR（Metric for Evaluation of Translation with Explicit ORdering）...
Code to train state-of-the-art Neural Machine Translation
07-16
标题中的“Code to train state-of-the-art Neural Machine Translation”指的是用于训练最先进的神经机器翻译（Neural Machine Translation, NMT）模型的源代码。NMT是一种基于深度学习的翻译技术，它利用神经网络...
Automatic_evaluation
04-05
Shell脚本可以调用各种评估工具（如BLEU、ROUGE for NLP任务，或准确率、F1分数等通用指标）来计算模型的性能。 4. 结果分析：将评估结果输出到日志文件或可视化报告中，便于分析。Shell脚本可以与Python、R或其他...
machine_translation:cs224n Assign4
03-22
【标题】"machine_translation:cs224n Assign4" 指的是斯坦福大学CS224n课程的一项作业，该课程专注于自然语言处理（NLP），而机器翻译是NLP中的一个重要领域。这个作业可能涉及到使用统计学和深度学习方法来实现...
NMT十篇必读论文（十）BLEU：a Method for Automatic Evaluation of Machine Translation
啊噗啊噗
12-20 2047
原文链接：https://www.jianshu.com/p/15c22fadcba5 BLEU (Bilingual Evaluation Understudy) is an algorithm for evaluating the quality of text which has been machine-translated from one natural language to an...
论文阅读：《BLEU: a Method for Automatic Evaluation of Machine Translation》
05-31 2604
https://blog.csdn.net/qq_21190081/article/details/53115580 论文地址：http://xueshu.baidu.com/s?wd=paperuri%3A%2888a98dec5bea94cca9f474db30c36319%29&filter=sc_long_sign&tn=SE_xueshusource_2kduw22v&...
BLEU：一种应用于机器翻译的Metric
gowithme11123123的博客
12-03 886
该文章着重介绍了BLEU的背景和理论知识，剖析了BLEU的数学公式，以及对于关键代码部分做出了解释
一种机器翻译的评估方法 BLEU
hhyer的博客
01-27 1170
title: BLEU date: 2021-08-17 18:23:27 tags: NLP的一些收获 论文链接 BLEU: a Method for Automatic Evaluation of Machine Translation 首先给出一组reference和candidate： Candidate1：It is a guide to action which ensures that the military always obeys the commands of the party. .
机器翻译（一）：BLEU（bilingual evaluation understudy）
AckClinkz的博客
10-18 3957
简介 BLEU（bilingual evaluation understudy）是一种评价翻译质量的指标，该评价指标重点关注 相同文本下，机器与人翻译结果的近似程度 即机器译文与参考译文的相似程度。
机器翻译自动评估-BLEU算法详解
热门推荐
青铜也王者
08-30 6万+
BLEU实质是对两个句子的共现词频率计算，但计算过程中使用好些技巧，追求计算的数值可以衡量这两句话的一致程度。 　　BLEU容易陷入常用词和短译句的陷阱中，而给出较高的评分值。本文主要是对解决BLEU的这两个弊端的优化方法介绍。
【Python】pandas：排序、重复值、缺省值处理、合并、分组
最新发布
yannan20190313的博客
07-30 866
【Python】pandas：排序（sort_index,sort_values,nsmallest,nlargest）、重复值（duplicated,drop_duplicates,value_counts,nunique）、缺省值处理（isna,isnull,notna,notnull,fillna,dropna,replace）、合并（join,merge,append,concat）、分组（groupby）
ModuleNotFoundError: No module named 'bleu'
07-27
这个错误通常表示您缺少一个名为 "bleu" 的Python模块。要解决这个问题，您可以尝试以下几个步骤： 1. 确保您已经正确安装了 "bleu" 模块。您可以使用以下命令来安装： ``` pip install bleu ``` 如果您使用...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值