AI刷题强到可怕?挑战高考数学卷,DeepSeek-R1、腾讯混元T1、Grok 3等十大模型测评来了
作者:微信文章<img />
https://mmbiz.qpic.cn/mmbiz_jpg/7WbP8ZjskNpvavW8BPta9kKjA0SencZBHv3yUkNLHe5owK2VQszwAkwSicic3cZtfBRyX1ibic9pZjicTuW4FOEBlQQ/640?wx_fmt=other&from=appmsg&wxfrom=5&wx_lazy=1&wx_co=1&tp=webp
<img />
2025年高考大幕虽已落下,但关于数学科目难度的讨论热度不减。
记者选取今年的全国新课标数学I卷作为考题,对DeepSeek-R1、腾讯元宝(混元T1)、OpenAI的o3、谷歌的Gemini 2.5 Pro和xAI的Grok3等十款AI推理大模型进行了测评,以检验当今主流AI推理大模型的数学能力。
测评结果显示,国产大模型DeepSeek-R1与腾讯混元T1以零错误并列榜首。而被马斯克称为“地表最强AI”的Grok 3却遭遇“滑铁卢”,排名倒数第三。
本次测评以2025年全国新课标数学I卷(总分150分)作为考题。但记者在测试中发现,部分AI推理模型以“重要考试期间”为由拒绝对包含试题的图片进行识别和解答。
为了让所有参评大模型站在同一起跑线,测评移除了试卷中所有需要分析图形和图表的题目,形成一份有效总分为117分的标准化试卷。
同时,对于谷歌Gemini 2.5 Pro等没有这一限制的推理模型,仍将以150分的完整试卷进行测试,旨在测试推理大模型所能达到的最高水平。
扣分标准上,记者在选择题和填空题上都遵循了高考评卷的扣分标准,但对于解答题,本次测评只根据结果计算得分,不对过程打分。
在排除了图形/图表题的117分试卷测试中,DeepSeek-R1与腾讯混元T1展现出了绝对的优势,以零错误的完美表现,取得了117分的满分成绩,并列第一。
<img />
讯飞星火X1以112分的成绩紧随其后。相较于DeepSeek-R1与腾讯混元T1这两款大模型,讯飞星火X1多错了一道填空题。
其他得分超过100分的还有Gemini 2.5 Pro(109分)、o3(107分)、阿里千问Qwen3(106分)和豆包深度思考模式(104分)。在分数占比最高的解答题上,Gemini 2.5 Pro和o3均有失误,其中一道大题仅有部分正确,而阿里千问Qwen3和豆包深度思考模式均拿下满分。
来源:每日经济新闻编辑:涂景 审定:刘培堃 核发:杨赟
https://mmbiz.qpic.cn/mmbiz_png/7WbP8ZjskNoFoYiaGewXrQT7HC9xwZoT5oRq4jGmVsmsZ0c1haoNbkZCB8ibLLLRtDG44CDBIwj25RmFyCdU1qWw/640?wx_fmt=png&from=appmsg&tp=webp&wxfrom=5&wx_lazy=1
持续关注
点个
https://mmbiz.qpic.cn/sz_mmbiz_png/6Z23dRryibdUoowiaM6tKBkDrwIMDLq1Kz9dFCqjtJa4y2H3VkNPNauNianTwzdTk4hCAo0Lic4jGfAma1ZMbSLenA/640?wx_fmt=other&wxfrom=5&wx_lazy=1&wx_co=1&tp=webp
<img />
和
<img />
页:
[1]