书生浦语项目首页:https://github.com/InternLM/InternLM
训练营课程首页:https://github.com/internLM/tutorial?tab=readme-ov-file
b站视频首页:OpenMMLab的个人空间-OpenMMLab个人主页-哔哩哔哩视频
课程简介(个人认知):介绍书生浦语开源平台体系,教会使用平台
本节课手册:https://github.com/InternLM/tutorial/blob/main/opencompass/opencompass_tutorial.md
基础作业
- 使用 OpenCompass 评测 InternLM2-Chat-7B 模型在 C-Eval 数据集上的性能
进阶作业
- 使用 OpenCompass 评测 InternLM2-Chat-7B 模型使用 LMDeploy 0.2.0 部署后在 C-Eval 数
- 据集上的性能
准备环境,包括conda的python环境和评测数据。
确认支持的数据集,支持internlm2_7b
下载internlm2-chat-7b模型到本地
获取数据集 cp /share/temp/datasets/OpenCompassData-core-20231110.zip /root/code/opencompass unzip OpenCompassData-core-20231110.zip
启动评测
评价结果