基础作业
- 使用 OpenCompass 评测 internlm2-chat-1_8b 模型在 C-Eval 数据集上的性能
创建环境
面向GPU的环境安装
失败,手动解压
错误原因:有些库没安装齐,提前进入了opencompass,找不到文件
错误示例:
列出所有跟 InternLM 及 C-Eval 相关的配置
启动评测 (10% A100 8GB 资源)
出现错误:
export MKL_SERVICE_FORCE_INTEL=1
#或
export MKL_THREADING_LAYER=GNU
成功运行:
完成:
进阶作业
- 将自定义数据集提交至OpenCompass官网