书生语言大模型闯关-L1-OpenCompass 评测 InternLM-1.8B 实践

最新推荐文章于 2024-09-27 16:14:02 发布
最新推荐文章于 2024-09-27 16:14:02 发布
阅读量200 收藏
点赞数 3
文章标签： 服务器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Passi0nate/article/details/142300440
版权

1 基本任务

基础任务（完成此任务即完成闯关）

  • 使用 OpenCompass 评测 internlm2-chat-1.8b 模型在 ceval 数据集上的性能，记录复现过程并截图。

2 主要实现

完成环境配置后，解压评测数据集，列出所有跟 InternLM 及 C-Eval 相关的配置使用opencompass进行评测 得到如下结果

Passi0nate
关注
OpenCompass 2.0 司南大模型评测榜单介绍
u013558123的博客
02-18 787
OpenCompass 2.0 司南大模型评测榜单
一文读懂司南大模型评测体系 OpenCompass
OpenCompass的博客
07-26 1143
在人工智能领域，大语言模型已经成为了技术创新的重要驱动力。为了更好地评估和提升大模型的性能，上海人工智能实验室研发推出了 OpenCompass 司南大模型开源评测体系。该体系是面向大语言模型、多模态大模型等各类模型的一站式评测平台。
大模型系列：OpenCompass（司南）大模型测评工具介绍和实践
2401_85377976的博客
07-17 1977
OpenCompass，也称为“司南”，是由上海人工智能实验室发布的一个开源的大模型评测体系，已经成为目前权威的大型模型评估平台，本篇介绍如何使用OpenCompass进行大模型测评，以及其中涉及的相关知识。OpenCompass概述介绍OpenCompass下载安装OpenCompass快速开始ppl、gen两种测评方式区别简述OpenCompass的Prompt构建数据集、测评指标、模型推理的配置测评结果可视化。
【书生大模型实战】L1-OpenCompass 评测 InternLM-1.8B 实践
cjy_colorful0806的博客
08-04 987
OpenCompass2.0，又称“司南”，是由上海人工智能实验室科学家团队正式发布了大模型开源开放评测体系。其主要是用于为大语言模型、多模态模型等提供一站式评测服务。开源可复现：提供公平、公开、可复现的大模型评测方案全面的能力维度：五大维度设计，提供 70+ 个数据集约 40 万题的的模型评测方案，全面评估模型能力丰富的模型支持：已支持 20+ HuggingFace 及 API 模型分布式高效评测：一行命令实现任务分割和分布式评测，数小时即可完成千亿模型全量评测。
书生大模型实战（从入门到进阶）L1-OpenCompass 评测 InternLM-1.8B 实践
m0_73672030的博客
09-25 1102
本文是对书生大模型L1-OpenCompass 评测 InternLM-1.8B 实践部分的学习和实现
书生大模型实战营（第三期闯关大挑战）- L1-OpenCompass 评测 InternLM-1.8B 实践
qq_42816781的博客
08-08 237
查看支持的数据集和模型,列出所有跟 InternLM 及 C-Eval 相关的配置。
书生大模型-基础岛6-OpenCompass 评测 InternLM-1.8B 实践
WongChiang的博客
08-30 437
使用 OpenCompass 评测 InternLM2-Chat-1.8B 模型使用 LMDeploy部署后在 ceval 数据集上的性能（选做）- 使用 OpenCompass 评测 internlm2-chat-1.8b 模型在 ceval 数据集上的性能，记录复现过程并截图。- 使用 OpenCompass 进行调用API评测（优秀学员必做）这里复用了之前30%的cuda11机器，教程使用了10%的机器。- 使用 OpenCompass 进行主观评测（选做）- 记录复现过程并截图。
《书生大模型实战营第3期》基础岛 第6关 ：OpenCompass 评测 InternLM-1.8B 实践
shiter编写程序的艺术
08-13 812
接下来，我们将展示 OpenCompass 的基础用法，分别用命令行方式和配置文件的方式评测InternLM2-Chat-1.8B，展示书生浦语在C-Eval基准任务上的评估。更多评测技巧欢迎查看文档~我们下节课再见！
OpenCompass 评测 InternLM-1.8B 实践
weixin_46509586的博客
09-08 589
有人花了三小时 ，搞不懂demo 十几分钟意思下得了，不过真实的时间长也有道理。时间挺长的 喝杯茶打打 看看片 或者刷刷leetcode 或者出去吃个饭？本文就是坑 没用弄出来 目前 看到这先不用看了 后续填坑2333。得先安装这个lmdeploy 要不然白评测了。我最后用30的a100用了1.5h左右。评测模型的好坏 ，所以本任务就是评测。本博客也是根据官方文档来的，这一关 环境少了很多。降低下numpy版本。
书生大模型训练营《第三期》基础岛 OpenCompass 评测 InternLM-1.8B 实践
m0_58068836的博客
08-14 335
【闯关任务】使用 OpenCompass 评测 internlm2-chat-1.8b 模型在 ceval 数据集上的性能，记录复现过程并截图。参考链接：Tutorial/docs/L1/OpenCompass/readme.md at camp3 · InternLM/Tutorial · GitHub效果如下：
大模型-书生训练营第三期闯关指南-linux
07-19
大模型-书生训练营第三期闯关指南-linux
书生·浦语大模型 - 基础岛 - 第3关 书生浦语提示词工程实践
08-10
书生·浦语大模型 - 基础岛 - 第3关 书生浦语提示词工程实践
linux-jdk-8u281-JDK1.8-64.zip
04-19
总结，"linux-jdk-8u281-JDK1.8-64.zip"提供的是一个适用于Linux系统的64位Java开发工具集，它在Java 1.8版本中引入的多项创新特性，极大地提升了开发人员的生产力和程序性能，成为许多开发者和企业项目中的首选版本...
《AI大模型应用》-书生·浦语大模型.zip
07-10
个人深耕AI大模型应用领域积累的成果，希望对您有所帮助。有大模型账号、环境问题、AI大模型技术应用落地方案等相关问题，欢迎详聊，能为您解决问题是我的荣幸！ 个人深耕AI大模型应用领域积累的成果，希望对您有所...
统信服务器操作系统【Cron定时任务服务】
RZer的博客
09-23 1176
Cron定时任务服务服务介绍、服务管理、服务配置
IPEmotion 2024 R2现支持Amazon S3和Windows SMB服务器
WINDHILL风丘科技
09-27 298
新版IPEmotion 2024 R2软件推出了许多新功能，其中的一大功能是支持Amazon S3、Windows SMB服务器以及新的IPE-CAM-007 USB摄像头。IPEmotion 2024 R2还支持直接写入TEDS数据和配置可装载电池的新款IPE833记录仪。
服务器被挂马，导致网站首页被更改怎么解决
最新发布
KookeeyLena7的博客
09-27 657
当服务器被挂马并导致网站首页被篡改时，说明服务器或网站的安全性遭到破坏。
使用docker创建zabbix服务器
a15864923744的博客
09-20 801
这几个容器创建后是UP状态就可以使用浏览器尝试访问 http://宿主机IP:8080，期间遇到问题是MySQL容器使用mysql:9.0镜像总是出错，所以用了mysql:8.0。zabbix默认账号密码是：Admin/zabbix。#创建zabbix后端服务容器。#创建zabbix前端服务容器。#创建MySQL容器。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值