ROUGE和pyrouge的安装

最新推荐文章于 2021-11-01 18:34:24 发布
最新推荐文章于 2021-11-01 18:34:24 发布
阅读量1.1k 收藏 2
点赞数 1
分类专栏： 服务器 文章标签： nlp rouge 深度学习 自然语言处理 python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u012495579/article/details/103613256
版权

ROUGE是由微软亚洲研究院知识挖掘组Chin-Yew Lin 研发的，用于摘要的自动评价，通过比较机器自动生成的摘要与人工生成的摘要中重叠单元的数量，来评价机器自动生成的摘要。该方法中考虑的重叠单元有n-gram, word sequences, word-pairs等，并提出了四个测量标准ROUGE-N, ROUGE-L, ROUGE-W, ROUGE-S。
该包用Perl语言编写，目前版本为ROUGE-1.5.5。

pyrouge是用于ROUGE摘要评估包的Python包装器，要安装pyrouge首先需要安装ROUGE。

一、ROUGE安装

1、安装包下载

安装ROUGE所需包我已经整理上传，可以点击下载。

2、具体安装

Step1：检查perl

因为DOM要求perl版本要在5.6.0以上，所以先在终端用 perl -v 查看一下当前版本，版本较低的话先升级一下perl。

Step2：Pip安装部分包

sudo apt-get update
sudo apt-get install libwww-perl
sudo apt-get install libxml-perl

Step3：安装XML-Parser

1）解压文件

tar -zxvf XML-Parser-2.44.tar.gz

2）进入解压的文件夹进行安装

cd XML-Parser-2.44
perl Makefile.PL 
make 
make test # 看到PASS为成功就继续，否则仔细看哪个case报错了 
sudo make install # 必须要sudo，否则可能没有读写文件的权限

Step4：安装XML-RegExp

参考Step3方法安装

Step5：安装XML-DOM

参考Step3方法安装，如果在make test的时候报错如下：

Test Summary Report
-------------------
t/build_dom.t       (Wstat: 512 Tests: 1 Failed: 1)
  Failed test:  1
  Non-zero exit status: 2
  Parse errors: Bad plan.  You planned 2 tests but ran 1.
Files=21, Tests=128,  2 wallclock secs ( 0.07 usr  0.01 sys +  1.56 cusr  0.10 csys =  1.74 CPU)
Result: FAIL
Failed 1/21 test programs. 1/128 subtests failed.
Makefile:968: recipe for target 'test_dynamic' failed
make: *** [test_dynamic] Error 255

输入下面命令修复即可：

sudo apt-get install -f
sudo apt-get update --fix-missing

Step6：安装DB_File

参考Step3方法安装，在make的时候如果出错如下：

version.c:30:16: fatal error: db.h: 没有那个文件或目录
compilation terminated.
Makefile:360: recipe for target 'version.o' failed
make: *** [version.o] Error 1

说明未安装Berkeley DB library，或安装不正确。解决方法如下：

sudo apt-get install libdb-dev

如果还没有用，可能是没有安装对应的版本，先使用：

sudo apt-cache search libdb

查看当前Berkeley DB library 的版本，然后再安装对应的版本

sudo apt-get install libdb5.3-dev

Step7：设置ROUGE环境变量

设置环境变量ROUGE_EVAL_HOME,假设你解压的ROUGE-1.5.5在/usr/local/RELEASE-1.5.5，则：

sudo vim /etc/profile

在文件末尾加上：

export ROUGE_EVAL_HOME="$ROUGE_EVAL_HOME:/usr/local/RELEASE-1.5.5/data"

Step8: 测试安装是否成功

以上步骤都进行完毕后，可以进ROUGE文件所在路径（即RELEASE-1.5.5），然后运行一下runROUGE-test.pl文件。

perl runROUGE-test.pl

如果有以下输出，且sample-output路径下各个文件都有内容的话，基本是安装成功了。

../ROUGE-1.5.5.pl -e ../data -c 95 -2 -1 -U -r 1000 -n 4 -w 1.2 -a ROUGE-test.xml > ../sample-output/ROUGE-test-c95-2-1-U-r1000-n4-w1.2-a.out
../ROUGE-1.5.5.pl -e ../data -c 95 -2 -1 -U -r 1000 -n 4 -w 1.2 -a -m ROUGE-test.xml > ../sample-output/ROUGE-test-c95-2-1-U-r1000-n4-w1.2-a-m.out
../ROUGE-1.5.5.pl -e ../data -c 95 -2 -1 -U -r 1000 -n 4 -w 1.2 -a -m -s ROUGE-test.xml > ../sample-output/ROUGE-test-c95-2-1-U-r1000-n4-w1.2-a-m-s.out
^C../ROUGE-1.5.5.pl -e ../data -c 95 -2 -1 -U -r 1000 -n 4 -w 1.2 -l 10 -a ROUGE-test.xml > ../sample-output/ROUGE-test-c95-2-1-U-r1000-n4-w1.2-l10-a.out
../ROUGE-1.5.5.pl -e ../data -c 95 -2 -1 -U -r 1000 -n 4 -w 1.2 -l 10 -a -m ROUGE-test.xml > ../sample-output/ROUGE-test-c95-2-1-U-r1000-n4-w1.2-l10-a-m.out
../ROUGE-1.5.5.pl -e ../data -c 95 -2 -1 -U -r 1000 -n 4 -w 1.2 -l 10 -a -m -s ROUGE-test.xml > ../sample-output/ROUGE-test-c95-2-1-U-r1000-n4-w1.2-l10-a-m-s.out
../ROUGE-1.5.5.pl -e ../data -c 95 -2 -1 -U -r 1000 -n 4 -w 1.2 -b 75 -a ROUGE-test.xml > ../sample-output/ROUGE-test-c95-2-1-U-r1000-n4-w1.2-b75-a.out
../ROUGE-1.5.5.pl -e ../data -c 95 -2 -1 -U -r 1000 -n 4 -w 1.2 -b 75 -a -m ROUGE-test.xml > ../sample-output/ROUGE-test-c95-2-1-U-r1000-n4-w1.2-b75-a-m.out
../ROUGE-1.5.5.pl -e ../data -c 95 -2 -1 -U -r 1000 -n 4 -w 1.2 -b 75 -a -m -s ROUGE-test.xml > ../sample-output/ROUGE-test-c95-2-1-U-r1000-n4-w1.2-b75-a-m-s.out
../ROUGE-1.5.5.pl -e ../data -3 HM -z SIMPLE DUC2002-BE-F.in.26.lst 26 > ../sample-output/DUC2002-BE-F.in.26.lst.out
../ROUGE-1.5.5.pl -e ../data -3 HM DUC2002-BE-F.in.26.simple.xml 26 > ../sample-output/DUC2002-BE-F.in.26.simple.out
../ROUGE-1.5.5.pl -e ../data -3 HM -z SIMPLE DUC2002-BE-L.in.26.lst 26 > ../sample-output/DUC2002-BE-L.in.26.lst.out
../ROUGE-1.5.5.pl -e ../data -3 HM DUC2002-BE-L.in.26.simple.xml 26 > ../sample-output/DUC2002-BE-L.in.26.simple.out
../ROUGE-1.5.5.pl -e ../data -n 4 -z SPL DUC2002-ROUGE.in.26.spl.lst 26 > ../sample-output/DUC2002-ROUGE.in.26.spl.lst.out
../ROUGE-1.5.5.pl -e ../data -n 4 DUC2002-ROUGE.in.26.spl.xml 26 > ../sample-output/DUC2002-ROUGE.in.26.spl.out

二、pyrouge安装

下面是最可靠的安装方法，采用其他方法可能会遇到各种难以解决的BUG。

git clone https://github.com/bheinzerling/pyrouge
cd pyrouge
python setup.py install

安装完成后可以运行下面命令，看到OK即安装成功

python -m pyrouge.test

参考

冷漠的蓝炮仗
关注
专栏目录
安装rouge和pyrouge
qq_43569299的博客
03-19 799
安装rouge和pyrouge
linux系统下ROUGE及pyrouge环境安装及测试说明
yjn_1226211934的博客
01-04 2109
linux系统下ROUGE及pyrouge环境安装及测试说明 ROUGE简介   ROUGE是由微软亚洲研究院知识挖掘组(The Knowledge Mining group at Microsoft Research Asia)调研经理(research manager) Chin-Yew Lin 研发的，用于摘要的自动评价，通过比较机器自动生成的摘要(called system_summary...
ROUGE-2.0：ROUGE自动摘要评估工具包。 支持ROUGE- [N，L，S，SU]，不同语言的词干和停用词，unicode文本评估，CSV输出
02-03
ROUGE 2.0 ROUGE 2.0是用于自动汇总任务的易于使用的评估工具包。 它使用度量标准系统，该系统通过将自动生成的摘要或翻译与一组参考摘要（通常是人为生成的）进行比较来工作。 ROUGE是计算自动生成的摘要的有效性的标准方法之一。 要了解ROUGE的工作原理，请。 产品特点 最新版本的ROUGE 2.0支持以下功能： 评估ROUGE-N（字母，二元组，三元组等） 评估ROUGE-L（总水平LCS） 对ROUGE-S和ROUGE-SU的评估（带有单字的跳字和跳字） 一次性评估多个ROUGE指标 不同语言的词干 使用可自定义的停用词删除停用词 unicode文本的评估（例如波斯
python中rouge是什么程序_win10下Anaconda使用pyrouge
weixin_39765290的博客
12-15 267
1.安装perl2.进入perl的CPAN Client安装XML:DOM，使用命令install XML:DOMPS: CPAN Client找不到的话在电脑本地搜一下就行了4.在系统环境变量Path下添加RELEASE-1.5.5和RELEASE-1.5.5/data的路径5.在anaconda下安装pyrouge包，使用命令pip install pyrouge此时直接运行使用rouge的相...
在Linux环境下配置pyrouge
仲夏
01-07 5339
1、首先需要安装rouge 具体安装方式见如下博客： http://blog.csdn.net/Hay54/article/details/78744912 2、需要安装及配置pyrouge http://blog.csdn.net/MerryCao/article/details/49174283 pyrouge本身是有bug的，所以很恶心，需要自己改一下…基本完成windows下安装p
Ubuntu安装pyrouge
weixin_40520161的博客
05-24 342
windows安装时一直安不上DB_File,最终放弃改为安在Ubuntu上。参考博客：https://blog.csdn.net/Hay54/article/details/78744912
ROUGE.tar.gz
12-18
PyRouge和Rouge的安装所需包，具体安装方案可以看我博客。PyRouge和Rouge的安装所需包，具体安装方案可以看我博客。
python中rouge是什么程序_rouge与pyrouge使用事项
weixin_29284201的博客
01-29 1173
1.rouge介绍ROUGE评价方法与pyramid，BLUE方法一起作为评价自动摘要质量的内部评价方法的三大中流砥柱。ROUGE:recall-oriented understand for gisting evalution2004年，Chin-Yew Lin 提出基本思想由多个专家分别生成人工摘要，构成标准摘要集，将系统生成的自动摘要与人工生成的标准摘要相比较，通过统计二者之间重叠的基本单元...
ROUGE与pyrouge的安装：centos server(无sudo)
救世腹肌229的博客
09-19 1045
[前言：] 作为二十一世纪第一个十年的产物，ROUGE与如今python package的安装便捷程度形成了鲜明对比。笔者在没有sudo的centos server上安装更是大伤脑筋，本文记录了我的安装过程。 网上还有很多类似的安装教程，但大多都需要sudo。如果你也????️sudo并不知所措的话可以看这个土办法。。。 [参考] 本文参考了https://blog.csdn.net/wr339988/...
macOS / Ubuntu下安装ROUGE及pyrouge 踩坑分享
Johnson Guo的博客
07-17 474
macOS / Ubuntu下安装ROUGE及pyrouge Ubuntu可以看这里：https://blog.csdn.net/wr339988/article/details/70165090 macOS下安装稍微简单一些，可以看这里：https://blog.csdn.net/baobao3456810/article/details/83744570 总的步骤可以分为以下几步： 安装perl——安装相关依赖——安装ROUGE——安装pyrouge 踩的坑： 1. 我在macOS下安装XML::DOM
rouge:ROUGE指标的完整Python实现（不是包装器）
05-28
胭脂 完整的Python库，用于ROUGE指标 。 免责声明 此实现独立于“官方” ROUGE脚本（又名ROUGE-155 ）。 结果可能是slighlty不同，看。 快速开始 克隆并安装 git clone https://github.com/pltrdy/rouge cd rouge python setup.py install # or pip install -U . 或从点子： pip install rouge 从外壳使用它（JSON输出） $rouge -h usage: rouge [-h] [-f] [-a] hypothesis reference Rouge Metric Calculator positional arguments: hypothesis Text of file path reference Text or file
R语言包的安装教程
超算小站
08-21 5599
简介 R语言包在线安装so happy，离线安装so hard，尤其是解决依赖问题…. 安装包 在线安装 在R的控制台,输入 # 安装 gridExtra install.packages("gridExtra") # 安装 stepNorm install.packages("stepNorm", contriburl="http://www.your.url", de...
windos上安装rouge1.5.5、安装pyrouge
繁星、晚风
10-28 768
一、 pip install -U git+https://github.com/pltrdy/pyrouge # 两步走的安装（安装完还需要自己删除git文件） git clone http://127.0.0.1/XXX/demo.git #change dir cd demo # install python setup.py install --user # windows环境下加--user 不然容易报错 二、 git clone https://github.com/pltrdy/f.
Windows环境下配置以及使用pyrouge的解决方案
github_37228709的博客
07-24 1658
写这篇博客的目的是为了记录自己使用pyrouge踩的坑，以及方便日后快速寻找对应的解决方案，不用再在网上找来找去的。 ps. pyrouge好像不支持中文的摘要评分，有可能是还需要对中文数据做其他处理才能使用，本文针对的是pyrouge在对英文数据的rouge进行评分的安装以及配置的过程。 pyrouge的安装以及配置 pyrouge的安装这里引用了一位知友的配置方案，这里直接附上作者写的解决方案：https://zhuanlan.zhihu.com/p/45548244 感觉这位知友给的方案，简单
pyrouge安装（Ubuntu）
wxtyixiao的博客
12-25 1501
一、安装 rouge是一种摘要生成的自动评价指标，但python环境中的pyrouge安装并不方便，主要过程如下： 1、安装Perl及依赖包（参见https://blog.csdn.net/Hay54/article/details/78744912）； 2、下载ROUGE-1.5.5（参见https://blog.csdn.net/Hay54/article/details/78744...
pyrouge在Ubuntu下的使用
uhauha2929的专栏
03-04 3730
pip install pyrouge 如报错： Cannot open exception db file for reading: data/WordNet-2.0.exc.db 则执行以下命令： cd /home/yzhao/soft/ROUGE-1.5.5/RELEASE-1.5.5/data rm WordNet-2.0.exc.db ./WordNet-2.0-Excep...
ROUGE安装配置
Flying_sfeng的博客
02-13 2223
ROUGE是做文本生成（eg文本摘要）的一个评价指标。 ROUGE的安装真的是一个巨坑，找了各种教程都不行。。实在搞不定只能按最复杂的教程搞了，最后居然成功了。。 首先，按照以下的方案配置： Ubuntu安装配置ROUGE pip install pyrouge（Python环境下调用rouge） 修改路径为ROUGE1.5.5的路径：pyrouge_set_rouge_path yourPat...
Windows下的ROUGE文本测评工具基本安装
weixin_30768175的博客
04-09 505
需要的安装包： rouge1.5.5：https://pan.baidu.com/s/1B7-LYn1lZKC8f51yXxNK9w Strawberry Perl ：http://strawberryperl.com/ 步骤 安装 Strawberry Perl。 在安装好 Strawberry Perl 中的运行组件CPAN Client，输入instal...
anaconda PyTorch安装
qq_45862085的博客
11-01 151
下载anaconda 3.6 版本 网址找到对应的版本号进行安装 安装成功后在开始可以找到anaconda命令窗口 创建子包避免全局 conda create -n pytorch python=3.6 conda activate pytorch 进入创建的新包 conda deactivate 退出 ...
windows 安装pyrouge
最新发布
05-13
Pyrouge 需要使用的依赖项有 jinja2 和 numpy，可以通过 pip 命令进行安装，如下所示： ``` pip install jinja2 numpy ``` 6. 修改配置文件。在解压后的 Pyrouge 目录中，找到 settings.py 文件并进行编辑。将 ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值