实测6个AI一起中秋猜灯谜GPT4竟然被吊打
国产大模型向全社会开放也过去整整1个月了。
一直想让国产大模型一起整个活,来看一下谁是第一。
这不,马上中秋了,我想到一个好玩的,让这些大模型一起:
猜灯谜。
于是我准备了几个不同形态的问题,我会分别把他们扔给这六位选手:

分别是文心一言、 智谱清言、通义千问、 商汤商量、讯飞星火,以及外籍选手GPT4。
比赛规则很简单,要求根据 中秋灯谜 题目写出答案和理由:
答案和理由都对,+1分;
答案对,理由错,+0.5分;
答案和理由全错,0分。
最后,我们来看看谁的分最高,谁的分最低~
OK,猜灯谜比赛正式开始!
第一轮
题目: 盒子里装鸡蛋(打一互联网红人) ,正确答案: 李诞 。

文心一言:李诞。理由也正确,+1分!
-

智谱清言:?佩...佩?0分。
-

通义千问:李诞。理由生搬硬套,不及格。+0.5分。
-

商汤商量:是不是该 反思一下自己?关键名字还打错了,人叫李佳琦...0分。
-

星火:。。。小鸡蛋可还行,我是小泥巴,呼叫小鸡蛋。。。0分。
-

GPT4:GPT你是我爹,论如何从鸡蛋到李诞到PDD到拼多多到黄老板...逻辑鬼才。0分!
-
第一轮结束。 文心一言 1 分 遥遥领先 , 通义千问0.5分 紧随其后,其他均是0分。
第二轮
题目: ???❤️(打一四字成语) ,正确答案: 步步惊心 。(讲道理这很简单了对吧)

文心一言:你来告诉我一下?和❤️是怎么变成踏实的谐音的。。0分。
-

智谱清言:答案和理由都正确,+1分!
-

通义千问:解释的通,但不对。0分。
-

商汤商量:解释的完美,答案也正确,+1分!
-

星火:兄弟?我觉得你是在骂我,真的。跟谁两狼狈为奸呢??0分!
-

GPT4:我觉得我的语文有点难以跟上你的理解了。。。0分。。。
-
第二轮结束。 文心一言 1 分,智谱清言1分,商汤商量1分, 三家并列第一 , 通义千问0.5分 紧随其后,星火和GPT4勇夺0分。
第三轮
题目: 野马不信,把老鼠拎了起来(打一蔬菜) ,正确答案: 马铃薯 。(谐音梗万岁!)

文心一言:牛逼。。。这都能猜出来,但是答案没提谐音梗,所以0.5分。
-

智谱清言:耶?茄子??您隔着跟马铃薯拍照呢?还怪萌的。。0分。
-

通义千问:有点东西,但是解释错误。0.5分。
-

商汤商量:谁能给我解释一下,为什么野马不信是指胡萝卜???0分。
-

星火:又一个喜欢茄子?的。。。0分。
-

GPT4:对不起我真的差点没绷住。可爱的小提莫到底招谁惹谁了。。。要被从土里拔出来就算了,还要被当成菜。。。。。。。。0分!
-
第三轮结束。 文心一言 1.5 分, 遥遥领先 ,智谱清言1分,商汤商量1分, 通义千问1分 三家并列第二 ,星火和GPT4继续垫底。
最后一轮
题目: 时逢中秋产于沪(打一五言唐诗句) ,正确答案: 海上生明月 。(最后一题,文化题!)

文心一言:答案正确,但是死活说有点难度。。。你是文化有限一言?0.5 分。
-

智谱清言:虽然都对了...也是张九龄的...但是这不是《观海》啊...算了毕竟出处对了一半,这种幻觉问题,放他一马。+1分。
-

通义千问:答案对了...但是你这诗人和出处全错了...这。。。只能给你0.5分了。
-

商汤商量:全对。。而且人聪明,他不说出处哈哈哈哈哈,看看上面那位老哥,这就叫言多必失。。。+1分。
-

星火:?你这属实是en凑了。。。 硬编啊。。0分。
-

GPT4:月落乌啼霜满天,我说你丫真能编...五言,会数数吗 。。。0分!
-
4轮比赛全部结束。
文心一言 2 分,智谱清言2分,商汤商量2分。三者并列第一!撒花? ? ?
通义千问1.5分,屈居第四。
星火和GPT4两位难兄难弟,全程0分,并列倒数第一。
这个小比赛,虽然很不精准,但是也能看出一些中文语境下特有的语境,强如GPT4,也只能一题答不上来,充分说明,国产大模型,极其、且非常有必要。
不过,星火兄弟,你这是个什么情况。。。
最后,马上也中秋&国庆双节啦!
看完了AI玩灯谜,我也来给粉丝们办一个中秋小活动猜灯谜活动嘿嘿, 第一个 猜对全部的这四个灯谜并在评论区留言 的,我会将你置顶,到时候请凭截图来找我 领取88元中秋红包 嘿嘿,小小心意,不成敬意。
题目如下:

欢迎踊跃留言,一起猜灯谜~
以上,既然看到这里了,


共有 0 条评论