AI聊天机器人层出不穷,国外比较知名的有chatGPT和Copilot,国内比较知名的有Kimi和文心一言。今天我就和这四个AI聊天机器人玩石头剪刀布,验证他们是否真的够智能。玩石头剪刀布这个游戏,我们知道是要双方同时出才不会有作弊的问题。而和AI聊天机器人玩这个游戏,AI必须提示让我们先出,它自己接着再随机出,才不会有作弊的行为。
首先,我们来看下Kimi,我说“我们来玩石头剪刀布”。如下图所示,Kimi告诉我他出了剪刀,这意味着我可以作弊,只要出石头就可以赢它。但是我没有出石头,而是出布继续验证它是否智能,结果让我很惊讶,竟然说布赢了剪刀。总的来说,Kimi虽然功能强大,但是它在玩这个游戏上面是完全“智障”的。
然后,我们测试文心一言。如下图所示,文心一言也和Kimi犯了同样的错误,先告诉我们它出了什么,那么我们是可以站在上帝的视角赢它的。但它比Kimi好一点,当我出布的时候,他知道剪刀是可以赢布的,虽然文心一言也存在“智障”行为,但是没有完全“智障”。
接着,我们测试微软的Copilot,可以看到它让我先出,如下图所示。它是完全理解这个游戏必须要用户先出才能保证公平性。对于一个AI聊天机器人来说,能在玩这个游戏时理解这一个点是非常重要的,这是体现AI聊天机器人是否智能的关键要素。
但遗憾的是,Copilot并没有完全理解这个游戏的规则。当我下一轮出剪刀,它出布,竟然说他赢了。如下图所示。
最后,我们来看下chatGPT。chatGPT也是Copilot一样让我们先出,这是正确的!而且它也能理解游戏规则,知道剪刀是可以赢布的。如下图所示。
总结:我喜欢用石头剪刀布去检验AI聊天机器人是否够智能,在这一次对比中,我们能看到chatGPT是完胜其他AI聊天机器人的。