12个国产大模型大战高考数学 意外炸出个大bug

今日头条
Toutiao
最新回复:2024年6月8日 20点4分 PT
  返回列表
83893 阅读
8 评论
量子位

继国产大模型挑战高考作文之后,是时候再战一下高考数学了。数学高考Ⅰ卷的题目,目前已经陆陆续续在网上有所公布(图片格式)。

那么现在,是时候考验国产大模型们的数学能力了。

有请“选手们”登场——

Kimi、通义千问、文心一言、豆包、智谱清言、百小应、讯飞星火、商量、腾讯元宝、天工、海螺AI、万知。

国产大模型 vs 高考数学选择题根据数学题目类型的不同,我们先来小试牛刀一下选择题。

测评的方式是将题目(图片格式)“喂”给国产大模型们,要求它们给出相应题目的答案:

查看题目,给出第1题到第8题的答案。

接下来,我们就来一同看下国产大模型们的表现。

Kimi

通义千问

豆包

智谱清言

百小应

讯飞星火

商量

腾讯元宝

海螺AI

万知

不难看出,很多国产大模型还未做数学题,先败在了AI识图这个步骤,无法生成答案。

(PS:有几位选手测试时因为无法识别,未能完成答题,因此没有放出结果。)

那么我们最后来看下“踢馆选手”——GPT-4o。

国产大模型 vs 数学大题鉴于一些国产大模型AI识图有点困难,我们这次直接先把这次高考的大题题目文字给copy出来,再让它们作答:

设n为正整数,数列 ( a1, a_2, cdots, a{4m+2} ) 是公差不为0的等差数列。若从中抽去项 ( ai ) 和 ( a_j ) (i

接下来,我们再来看下国产大模型们的表现。

Kimi

通义千问

文心一言

豆包

智谱清言

百小应

讯飞星火

商量

腾讯元宝

天工

海螺AI

万知

最后,还是有请“踢馆选手”——GPT-4o。

那么,你觉得国产大模型们,识图+解数学题,哪家比较好一点呢?

最后,关于AI智能助手,这里也有一份最新用户数据分析报告供你参考:

https://mp.weixin.qq.com/s/sYxbvown5qLBnEs7zIR6Bg

关注者
1 楼
这种文章的意义何在?
w
wang68p2003
2 楼
比起一年前AI进步太大。大模型对于AI就像Bits对于计算机一样
C
CUOBI
3 楼
国产个屁 都是开源的llama
曾祖爷爷
4 楼
只要问国产AI模型一个问题,他们就会全部死机😁 翠是独裁者吗?
映像伦理审查
5 楼
Bug在哪儿?
j
juewangle
6 楼
再怎么做下去也都是垃圾 不过是拼凑抄袭来的东西而已
z
zhangjiakou
7 楼
垃圾文章
s
sbnygsss
8 楼
煞笔作者,东拼西凑一堆截图,完全不知道应该怎么写文章。