★观前提示:以下内容仅为内测测试内容,不代表未来正式版如何,或许你认为它与chatgpt仍有不小的差距,或许你认为它目前做的已经不错了,都可以,但是咱们测试体验,只讲述体验,本篇文章不做对比。
如有疑问,或者好的想法,欢迎评论区交流学习!
一、介绍
3月16日,百度召开新闻发布会。从百度创始人、董事长兼首席执行官李彦宏现场演示的demo效果上看,文心一言具备文学创作、商业文案创作、数理推算等大语言模型较常见的优势和能力,还在中文理解、多模态生成能力上更具特色。
文心一言可以做什么?
- 与人对话互动
- 回答问题
- 协助创作
- 高效便捷地帮助人们获取信息、知识和灵感等
(๑•̀ㅂ•́)و✧其它的,话不多说,一起去测试一下看看究竟如何?
二、测试
1️⃣基础测试(偏常规使用)
1.今天xx地天气怎么样?
这个回答还是可以理解的,毕竟是AI语言模型。
2.你是谁?
这里它成功给出了自己的介绍,再问它文心一言怎么来的?
它对文心一言的由来进行了解释,接下来问一下常识问题。
3.我国四大名著以及其作者是谁?
四大名著及其作者都写了出来,如果能做到顺序上的一一对应,个人感觉会更好,但是它括号里有解释,是按照的成书顺序的先后顺序,这也合理。接着再问一个常识区分题。
4.是林黛玉倒拔的垂杨柳吗?
它成功给出了解释,并具有因果之间的联系,接下来问一个经典的数学问题——鸡兔同笼。
5.现有一笼子,里面有鸡和兔子若干只,数一数,共有头14个,腿38条,你能算出鸡和兔子各有多少只吗?
结果是正确了,但是细心的小伙伴可以发现,这后面这一句逻辑关联性不强。
接下来再让它写一下简单的代码试试
6.请帮我用C++写一个打印菱形的程序
除了代码的排版逻辑上不够整洁优美,其它的还是可以的。
基础测试就先到这,接下来进入进阶内容测试。
2️⃣进阶测试(偏功能性)
1.公司起名
如果要成立一个商业管理公司,可以起个什么公司名?
给出了几个公司名,并做出了解释,不过一些名字个人感觉有些过于前沿化(偏离主题了),总体来说差强人意,可以为起名做个参考思路。
2.新闻稿生成
帮我生成一篇公司成立的新闻稿,数字商贸公司的理念是互惠共赢,200字左右。
新闻稿可能格式不太符合预期,不过字数符合要求,内容也有一定逻辑道理。
3.诗词创作
帮我生成一首关于“一诺千金”的藏头诗
帮我写一首关于燕子的五言绝句
一开始的藏头诗前两句还是不错的,但是后两句突然就有些偏远了,还有就是下面的五言绝句,虽然确实内容是关于燕子的,但是不属于五言绝句的范畴。
4.对话交互
普通话
四川话
普通话目前可能还没有加入,四川话目前生成的语言没问题,就类似于文本转语音。
5.AI绘画
请为汉语演讲比赛绘制一张宣传海报
你能将它画出来吗?
上下文关联性目前来看是有欠缺的,期待后续改善。
6.AI生成视频
请将以上内容生成视频
可能是打开方式不对?如果有朋友看到这里,成功生成了,麻烦评论区教我一下方法,谢谢!
7.代码编写
生成一个冒泡排序的C语言程序
把核心程序大致写出来了,但是写的并不全,总体来说差强人意,期待后续的更新迭代。
8.做高考题
①高考数学
从甲、乙等5名同学中随机选3名参加社区服务工作,则甲、乙都入选的概率为(2022年高考数学填空题)
两步讨论
(1)5选3一共有多少种组合?
运用求排列数的公式C(5,3)=5!/(3!(5-3)!)=10,结果有10种可能;
(2)分析这些可能性中,甲、乙同时入选的情况有多少种?
其实一共只有3个人选,而甲、乙两人已经占了两个名额,剩下一个名额,给其余3个人去争取。因此这是一个3选1的问题,结果是C(3,1)=3。甲、乙同时入选的情况有3种。
综上,甲、乙都入选的概率有3/10, 即0.3.
结果应该是0.3
目前来看,在做具有数学思维题上的时候,有些薄弱,尚待改进。
②高考语文
“本手、妙手、俗手”
首先字数有所缺少,测试为600字左右,但要求是不少于800字,还有就是文章对“本手、妙手、俗手”理解不够深彻,更多的是浮于水面,关于文本上下文联系的处理,以及对文本的深度理解,有待改善。
9.英文文本翻译(处理)
你能将下面这一段翻译成英语吗?南京长江大桥是长江上首座由中国设计、采用国产材料建造的铁路、公路两 用桥,上层的4车道公路桥长4589米,下层的双轨道铁路桥长6772米。铁路桥连 接原来的天津—浦又和上海—南京两条铁路线,使火车过江从过去一个半小时缩短 为现在的2分钟。大桥是南北交通的重要枢纽,也是南京的著名景点之一。 南京长江大桥的建成标志着中国桥梁建设的一个飞跃,大大方便了长江两岸 的物资交流和人员来往,对促进经济发展和改善人民生活起到了巨大作用。(2022年6月CET6 英语真题翻译)
请讲这一段翻译为汉语
对比有道的翻译看一下,大致上处理是没问题的,关于翻译的处理还可以,个别细节上可能有所区别,但是总体还是不错的。
三、总结
✧关于这次的体验,我个人感觉,离同类的一些语言模型的语言模型还有一段距离,无论是文本处理上,还是逻辑呈现上,但是无须踩一捧一,欠缺的部分后续应该也会不断迭代完善,不过刚刚发布体验,文心一言犹在新生之时,我们不妨给它一点儿时间,看看后续成长如何,再下结论也不迟,一起期待一下吧!真心希望文心一言会越来越好!(〃 ̄o ̄) 人 ( ̄︶ ̄〃)
关于测试暂时测试这些,很感谢你能看到这里,如有相关疑问,还请下方评论留言。
Code_流苏(CSDN)(一个喜欢古诗词和编程的Coder😊)
如果对大家有帮助的话,希望大家能多多点赞+关注!这样我动力会更足哦! ღ( ´・ᴗ・` )比心
★重点是希望这篇文章有帮助到你,欢迎评论交流学习哦!