AI刷题强到可怕?挑战高考数学卷,DeepSeek-R1、腾讯混元T1、Grok 3等十大模型测评来了
更新时间:2025-06-11 01:08:24 浏览次数:

  元宝、OpenAI的o3、谷歌的Gemini 2.5 Pro和xAI的Grok3等十款AI推理大模型进行了测评,以检验当今主流AI推理大模型的数学能力。

  混元T1以零错误并列榜首。而被马斯克称为“地表最强AI”的Grok 3却遭遇“滑铁卢”,排名倒数第三。

  混元T1并列第一

  混元T1展现出了绝对的优势,以零错误的完美表现,取得了117分的满分成绩,并列第一。这表明,在代数计算和函数题等题型解答上,其能力已经达到了极高的水准和稳定性。

  飞星火X1以112分的成绩紧随其后。相较于DeepSeek-R1与腾讯混元T1这两款大模型,讯飞星火X1多错了一道填空题。这道题的正确答案是“±2”,而讯飞星火X1给出的答案是“2”。实际上,该模型的推理过程没有问题,认为“2”和“-2”都满足题目条件,但陷入自我怀疑,最终只给出了答案“2”。

  飞星火X1的推理过程

  其他得分超过100分的还有Gemini 2.5 Pro、o3、阿里千问Qwen3和豆包深度思考模式。在分数占比最高的解答题上,Gemini 2.5 Pro和o3均有失误,其中一道大题仅有部分正确,而阿里千问Qwen3和豆包深度思考模式均拿下满分。

  
 

  Grok 3惨遭“滑铁卢”,排名倒数第三

  在本次参评的所有AI推理大模型中,如果说有谁的结果最令人意外,那无疑是马斯克旗下xAI公司开发的、被马斯克称为“地表最强AI”的Grok 3。

  Grok在发布之初就被市场寄予厚望,被认为是最有潜力挑战GPT和Gemini霸主地位的“黑马”。马斯克多次暗示,Grok的目标是成为最强大的AI。

  然而,Grok 3此次的表现可以说是遭遇了“滑铁卢”。在117分的试题测试中,深入分析其答卷,测试过程显示,即使在排名倒数第二的是智谱清言推理模式,在117分试卷的测试中得分为78分。

  实际上,该模型在多道题目的推理过程中都找到了正确答案,但是往往会在最后一步出现自我怀疑导致逻辑崩溃,陷入循环,最终功亏一篑,白白丢了很多分。

  
 

  智谱清言推理模式解答过程

  排在最末尾的是Kimi k1.5,该模型在最后两道压轴大题上栽了大跟头,损失了大量的分数。

  综合所有测试情况来看,在处理有固定步骤和严密逻辑的数学问题上,AI推理大模型已经具备很强的能力。但在涉及抽象和创新思维的题目上,目前的大模型还存在一定的局限性。

  未经许可禁止、、及镜像等使用

推荐图文

鄂ICP备2024040700号-2
武汉砺行体育文化传媒有限公司-版权所有
数据源自网络仅供参考