安装——面向GPU的环境安装
把上面克隆的包解压缩到/root/opencompass/data/下面:
执行后,在 OpenCompass 下可以看到data文件夹:
InternLM和ceval 相关的配置文件
按照执行代码,列出所有跟 InternLM 及 C-Eval 相关的配置,执行结果:
启动评测 (10% A100 8GB 资源)
使用命令行配置参数法进行评测
打开 opencompass文件夹下configs/models/hf_internlm/的hf_internlm2_chat_1_8b.py ,设置内容如下:
按执行代码操作,结果:
使用配置文件修改参数法进行评测
在configs文件夹下创建eval_tutorial_demo.py,内容为:
结果:
至此,完成关卡测评内容。