实测｜6个AI一起中秋猜灯谜，GPT4竟然被吊打？
原创 数字生命卡兹克 数字生命卡兹克 2023-09-27 18:09 天津
互动数据
- 阅读：2389
- 点赞：33
- 转发：15
- 喜欢：11
- 留言：30
国产大模型向全社会开放也过去整整1个月了。
一直想让国产大模型一起整个活，来看一下谁是第一。
这不，马上中秋了，我想到一个好玩的，让这些大模型一起：
猜灯谜。
于是我准备了几个不同形态的问题，我会分别把他们扔给这六位选手：
分别是文心一言、智谱清言、通义千问、商汤商量、讯飞星火，以及外籍选手GPT4。
比赛规则很简单，要求根据中秋灯谜题目写出答案和理由：
答案和理由都对，+1分；
答案对，理由错，+0.5分；
答案和理由全错，0分。
最后，我们来看看谁的分最高，谁的分最低～
OK，猜灯谜比赛正式开始！
第一轮
题目：盒子里装鸡蛋（打一互联网红人），正确答案：李诞。
文心一言：李诞。理由也正确，+1分！
-
智谱清言：？佩…佩？0分。
-
通义千问：李诞。理由生搬硬套，不及格。+0.5分。
-
商汤商量：是不是该反思一下自己？关键名字还打错了，人叫李佳琦…0分。
-
星火：。。。小鸡蛋可还行，我是小泥巴，呼叫小鸡蛋。。。0分。
-
GPT4：GPT你是我爹，论如何从鸡蛋到李诞到PDD到拼多多到黄老板…逻辑鬼才。0分！
-
第一轮结束。文心一言1分遥遥领先，通义千问0.5分紧随其后，其他均是0分。
第二轮
题目：👣👣😱❤️（打一四字成语），正确答案：步步惊心。（讲道理这很简单了对吧）
文心一言：你来告诉我一下😱和❤️是怎么变成踏实的谐音的。。0分。
-
智谱清言：答案和理由都正确，+1分！
-
通义千问：解释的通，但不对。0分。
-
商汤商量：解释的完美，答案也正确，+1分！
-
星火：兄弟？我觉得你是在骂我，真的。跟谁两狼狈为奸呢？？0分！
-
GPT4：我觉得我的语文有点难以跟上你的理解了。。。0分。。。
-
第二轮结束。**文心一言1分，智谱清言1分，商汤商量1分，**三家并列第一，通义千问0.5分紧随其后，星火和GPT4勇夺0分。
第三轮
题目：野马不信，把老鼠拎了起来（打一蔬菜），正确答案：马铃薯。（谐音梗万岁！）
文心一言：牛逼。。。这都能猜出来，但是答案没提谐音梗，所以0.5分。
-
智谱清言：耶？茄子🍆？您隔着跟马铃薯拍照呢？还怪萌的。。0分。
-
通义千问：有点东西，但是解释错误。0.5分。
-
商汤商量：谁能给我解释一下，为什么野马不信是指胡萝卜🥕？？0分。
-
星火：又一个喜欢茄子🍆的。。。0分。
-
GPT4：对不起我真的差点没绷住。可爱的小提莫到底招谁惹谁了。。。要被从土里拔出来就算了，还要被当成菜。。。。。。。。0分！
-
第三轮结束。**文心一言1.5分，遥遥领先，智谱清言1分，商汤商量1分，**通义千问1分****三家并列第二，星火和GPT4继续垫底。
最后一轮
题目：时逢中秋产于沪（打一五言唐诗句），正确答案：海上生明月。（最后一题，文化题！）
文心一言：答案正确，但是死活说有点难度。。。你是文化有限一言？0.5分。
-
智谱清言：虽然都对了…也是张九龄的…但是这不是《观海》啊…算了毕竟出处对了一半，这种幻觉问题，放他一马。+1分。
-
通义千问：答案对了…但是你这诗人和出处全错了…这。。。只能给你0.5分了。
-
商汤商量：全对。。而且人聪明，他不说出处哈哈哈哈哈，看看上面那位老哥，这就叫言多必失。。。+1分。
-
星火：？你这属实是en凑了。。。硬编啊。。0分。
-
GPT4：月落乌啼霜满天，我说你丫真能编…五言，会数数吗 。。。0分！
-
4轮比赛全部结束。
文心一言2分，智谱清言2分，商汤商量2分。三者并列第一！撒花🎉🎉🎉****
通义千问1.5分，屈居第四。
星火和GPT4两位难兄难弟，全程0分，并列倒数第一。
这个小比赛，虽然很不精准，但是也能看出一些中文语境下特有的语境，强如GPT4，也只能一题答不上来，充分说明，国产大模型，极其、且非常有必要。
不过，星火兄弟，你这是个什么情况。。。
最后，马上也中秋&国庆双节啦！
看完了AI玩灯谜，我也来给粉丝们办一个中秋小活动猜灯谜活动嘿嘿，第一个****猜对全部的这四个灯谜并在评论区留言的，我会将你置顶，到时候请凭截图来找我领取88元中秋红包嘿嘿，小小心意，不成敬意。
题目如下：
欢迎踊跃留言，一起猜灯谜～