最近国产大语言模型确实是遍地开花,前有文心一言,后有通义千问,不久前商汤也发布了他们的大模型——商量。现在科大讯飞也宣布要在5月6日发布他们大模型——星火认知大模型。

打开网易新闻 查看精彩图片

我们有幸得到了内测名额,立刻对它进行了一系列灵魂拷问,其中就有问倒了ChatGPT的弱智吧经典五问,现在就来看看星火大模型表现如何。

打开网易新闻 查看精彩图片

经典第一问:我的蓝牙耳机坏了,应该去看眼科还是耳科?

星火大模型回答:您应该去看耳科。蓝牙耳机是与耳朵相关的设备,所以需要由专业的耳科医生进行检查和修理。

打开网易新闻 查看精彩图片

同样的问题,来看看文心一言是怎么说的:

应该去看耳科或者听力科。蓝牙耳机坏了可能是因为多种原因,例如进水、过度使用、硬件故障等。看耳科或听力科可以更专业地检查和诊断问题,并提供适当的治疗方案。

如果您无法确定该看哪个科室,请先咨询医生或者就近前往医院的急诊科,听从医生的建议。祝您早日解决问题并获得新的蓝牙耳机。

打开网易新闻 查看精彩图片

再来看看ChatGPT是怎么回答的:如果您的蓝牙耳机坏了,需要修理或更换,建议去电子产品维修店或者相关品牌售后服务点进行处理。与此无关,因此无需去看耳科或眼科医生。

打开网易新闻 查看精彩图片

ChatGPT选手过于专业,暂时失去比赛资格,我们继续对比文心一言和星火大模型。

经典第二问:我的孙子今年10岁,现在送他去少年宫学习雪球术会不会太晚了?

星火大模型回答:不会太晚。少年宫的雪球术课程通常适合各个年龄段的孩子,包括10岁的孩子。学习雪球术可以培养孩子的协调性、反应能力和团队合作精神,同时也可以增强孩子的体质和免疫力。所以,如果您的孙子对雪球术感兴趣,不妨送他去尝试一下。

不过紧接着又问了几个关于火球术和火魔法的问题,它倒是识别出来在现实生活中并不存在这样。

打开网易新闻 查看精彩图片

文心一言回答:来得及,现在学习正合适。至于火球术和火魔法,emmmm都来得及,可以说文心一言是专业的废话文学大师。

打开网易新闻 查看精彩图片
打开网易新闻 查看精彩图片

经典第三问:高考满分只有750分,怎么才能考上985

星火大模型:一句话,想要考上985大学就要好好学习!

打开网易新闻 查看精彩图片

文心一言:如果您的高考分数只有750分左右,想要考上985大学是有一定难度的。

打开网易新闻 查看精彩图片

经典第四问:是弱智创造了弱智吧还是弱智吧创造了弱智?

星火大模型:这涉及到哲学和语言学,没有准确答案。

打开网易新闻 查看精彩图片

文心一言:不太清楚你指的具体含义和背景,不过我们可以从一些普遍的逻辑和语言学理论出发来回答这个问题。

打开网易新闻 查看精彩图片

经典第五问:地下赌马是不是也叫私密马赛?

星火大模型:“地下赌马”和“私密马赛”并不是同一个概念。在某些地方,赌博是非法的,而地下赌马则是指在地下赌场或私人场所进行的赌博活动。

打开网易新闻 查看精彩图片

文心一言:虽然"马赛"一词可以用于形容赌博,但是地下赌马通常是指非法的赌博活动,其参与者往往不遵守道德和法律规定。

打开网易新闻 查看精彩图片

接下来就是一些常规测试了,比如最典型的鸡兔同笼问题

假设笼子里都是兔或者都是鸡,比如:笼子里有30只头,68 只脚,免多少?鸡多少?

星火大模型:没有答案。

打开网易新闻 查看精彩图片

文心一言:得出了正确答案

打开网易新闻 查看精彩图片

再比比文学创作能力,首先写一首七言律诗。

星火大模型:挺押韵

打开网易新闻 查看精彩图片

文心一言
:有点那个味儿,写得不错。

打开网易新闻 查看精彩图片

难度加大点,续写一段红楼梦。

星火大模型:贾宝玉出家

打开网易新闻 查看精彩图片

文心一言:林黛玉穿越时空开启无限流世界

文心一言这个答案,实在是不知道怎么形容.......无限套娃,就是百万字大长篇的梗概吧。

打开网易新闻 查看精彩图片

实际内测星火大模型
以后就会发现,它在计算和文学创作方面的能力稍微弱一点,但是在语义理解能力上倒是不错,只能说还有很大的进步空间。

毕竟这是一款还没有发布的大模型,现在只提供内测,也许发布会上可以给大家惊喜吧。