测评各主流大模型对复杂文档处理的精确度,司马阅领先
接下来问的是腾讯元宝,腾讯元宝回答对了资深研发人员和初级研发人员,前两类的数据也是正确的,但是它给出的第三类职位是产品经理,而原文中是技术总监,结果不完全正确。来看看司马阅的回答,司马阅给出的答案是百川大模型的使用占比为4.0%,360智脑的使用占比为1.5%,原文也是这两个数据,回答正确。接着问通义千问,通义千问给出的职位是算法工程师、产品经理、大模型开发,三个职位全错,对应的数据自然也是错误的。接着我们问Kimi,Kimi的回答是数字人占比4.7%,机器人占比2.0%,只回答对了数字人的占比。
原创
2024-08-14 21:02:43 ·
402 阅读 ·
0 评论