在自然语言处理和文本摘要领域,ROUGE(Recall-Oriented Understudy for Gisting Evaluation)是一组用于评估自动生成的摘要或摘录与参考摘要之间相似度的指标。ROUGE指标主要基于召回率(Recall)的概念,用于衡量自动生成的摘要中包含了多少关键信息和重要文本片段。本文将详细介绍ROUGE指标的基本概念和使用方法,并提供相应的源代码示例。
ROUGE指标主要包括ROUGE-N、ROUGE-L和ROUGE-S。其中,ROUGE-N衡量自动生成的摘要与参考摘要之间的n-gram重叠情况,ROUGE-L基于最长公共子序列(Longest Common Subsequence)衡量两个摘要之间的重叠程度,ROUGE-S则是基于Skip-bigram(跳跃二元组)的概念,用于衡量两个摘要之间的相似度。
下面是一个使用Python计算ROUGE指标的示例代码:
from nltk.util import ngrams
from nltk.