书生·浦语大模型 - 基础岛 - 第6关 OpenCompass 评测 InternLM-1.8B 实践

1. 面向GPU的环境安装

conda create -n opencompass python=3.10
conda activate opencompass
conda install pytorch==2.1.2 torchvision==0.16.2 torchaudio==2.1.2 pytorch-cuda=12.1 -c pytorch -c nvidia -y

# 注意：一定要先 cd /root
cd /root
git clone -b 0.2.4 https://github.com/open-compass/opencompass
cd opencompass
pip install -e .


apt-get update
apt-get install cmake
pip install -r requirements.txt
pip install protobuf

2. 解压评测数据集

3. 列出InternLM和ceval 相关的配置文件

4. 使用命令行配置参数法进行评测