基础-6-OpenCompass 评测 InternLM-1.8B 实践

安装——面向GPU的环境安装

把上面克隆的包解压缩到/root/opencompass/data/下面:

执行后,在 OpenCompass 下可以看到data文件夹:

InternLM和ceval 相关的配置文件

按照执行代码,列出所有跟 InternLM 及 C-Eval 相关的配置,执行结果:

启动评测 (10% A100 8GB 资源)

使用命令行配置参数法进行评测

打开 opencompass文件夹下configs/models/hf_internlm/的hf_internlm2_chat_1_8b.py ,设置内容如下:

 按执行代码操作,结果:

使用配置文件修改参数法进行评测

在configs文件夹下创建eval_tutorial_demo.py,内容为:

结果:

至此,完成关卡测评内容。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值