参考资料
视频地址:https://www.bilibili.com/video/BV1Pm41127jU/
课程文档:https://github.com/InternLM/Tutorial/blob/camp2/opencompass/readme.md、
基础作业
使用 OpenCompass 评测 internlm2-chat-1_8b 模型在 C-Eval 数据集上的性能
- 在Intern Studio平台打开开发机,使用10%A100,并使用Cuda11.7-conda
2.安装 opencompass:
3. 数据准备
4. 启动测评
如果一切正常,您应该看到屏幕上显示 “Starting inference process”,如果报错,则重新执行以下指令
评测完成后,将会看到: