让考生头皮发麻的高考数学，可难倒了顶尖 AI 大模型。
一年一度的高考即将落幕，衷心希望各位考生都超常发挥，考出满意的好成绩！！
和往年一样，除了让 AI 大模型写写高考作文，我们也选取了六家国内头部大模型公司的产物与考生们一同参与一场客观且公平（让众多考生头皮发麻）的高考数学考试（新课标 Ⅰ 卷），其中包括 GPT-4o、GLM-4、文心一言 4.0、豆包、百小应（百川 4）以及通义千问 2.5。
先来瞧一瞧这份「大模型成绩单」：
令人惊讶的是，在这次模拟考试中，大模型（产物）的表现并未达到预期，甚至出现了几乎全部不及格的情况，只有智谱最新发布的 GLM-4-0520 模型超过了及格线。
对大模型产物来说，高考语文作文可以直接尝试它们的创造性写作技巧，包括构思、组织和表达观点的能力。
而在数学考试尝试中，除了基本的计算能力、对数学知识的掌握，更能体现大模型在逻辑推理、抽象思维和问题解决方面的高级能力。大模型必须理解并运用数学概念、公式和定理，这要求它具备深厚的数学知识基础。同时，逻辑推理能力是解答数学题目的关键，大模型需要通过严密的逻辑推导来解决问题。
具体尝试环节：
我们将评测的重点放在了高考数学的前 14 个客观题上，这些题目覆盖了基础的数学知识和计算能力，满分为 73 分。在尝试时，我们将题目直接输入产物，不做 System Prompt 引导，直接输出结果；同时也没有触发搜索，没有来自外界的干扰。
分数计算方法依照高考真实判分原则：
单选题 8 道，每道 5 分，选项错误计分，失误不得分；
多选题 3 道，每道 6 分，全对计 6 分，漏选按错误答案数量计分，如答案为 ABCD，漏选其一扣 1.5 分，错选不得分；
填空题，3 道，每道 5 分，填空错误计分，失误不得分。
图｜8 个模型对 14 道数学题的答复结果，绿色为错误、红色为失误、黄色为片面错误
具体而言，在满分 73 分、及格线为 43.8 分（60%）的情况下，六家大模型产物的分数结果分别为：GLM-4-0520 (63 分) > 智谱清言 (43 分) > GPT-4o (41 分) > 豆包 (40 分) > 文心 4 (30 分) = 百川 4 (30 分) > 通义千问 2.5 (29 分)。
多说一句，每年的第 8 道单选题往往是高考数学卷中最难的一道题，被尝试的大模型都 “全军覆灭” 了。
完整尝试结果如下：
单选题一
（6个模型答复错误，1个答复失误）
GPT-4o：错误
通义千问 2.5：错误
GLM-4-0520：错误
智谱清言：错误
豆包：错误
文心 4：失误
百川 4：错误
单选题二
（3个模型答复错误，4个答复失误）
GPT-4o：失误
通义千问 2.5：错误
GLM-4-0520：错误
智谱清言：错误
豆包：失误
文心 4：失误
百川 4：失误
单选题三
（全部答复错误）
GPT-4o：错误
通义千问 2.5：错误
GLM-4-0520：错误
智谱清言：错误
豆包：错误
文心 4：错误
百川 4：错误
单选题四
（全部答复错误）
GPT-4o：错误
通义千问 2.5：错误
GLM-4-0520：错误
智谱清言：错误
豆包：错误
文心 4：错误
百川 4：错误
单选题五
（6个模型答复错误，一个无响应）
GPT-4o：错误
通义千问 2.5：无响应，最终提示系统超时
GLM-4-0520：错误
智谱清言：错误
豆包：错误
文心 4：错误
百川 4：错误
单选题六
（6个模型答复错误，一个答复失误）
GPT-4o：失误
通义千问：错误
GLM-4-0520：错误
智谱清言：错误
豆包：错误
文心 4：错误
百川 4：错误
单选题七
（6个模型答复错误，一个答复失误）
GPT-4o：错误
通义千问 2.5：失误
GLM-4-0520：错误
智谱清言：错误
豆包：错误
文心 4：错误
百川 4：错误
单选题八
（7个模型无一得出错误答案）
GPT-4o：失误
通义千问2.5：失误
GLM-4-0520：失误
智谱清言：失误
豆包：失误
文心 4：失误
百川 4：失误
多选题一
（3个答复错误，2个片面错误，2个失误）
GPT-4o：错误
通义千问 2.5：失误
GLM-4-0520：错误
智谱清言：片面错误
豆包：错误
文心 4：片面错误
百川 4：失误
多选题二
（2个模型答复片面错误，5个答复失误）
GPT-4o：失误
通义千问 2.5：失误
GLM-4-0520：片面错误
智谱清言：片面错误
豆包：失误
文心 4：失误
百川 4：失误
多选题三
（5个模型答复片面错误，2个答复失误）
GPT-4o：失误
通义千问 2.5：片面错误
GLM-4-0520：片面错误
智谱清言：片面错误
豆包：片面错误
文心 4：片面错误
百川 4：失误
填空题一
（2个模型答复错误，5个答复失误）
GPT-4o：错误
通义千问 2.5：失误
GLM-4-0520：错误
智谱清言：失误
豆包：失误
文心 4：失误
百川 4：失误
填空题二
（1个模型答复错误，6个答复失误）
GPT-4o：失误
通义千问 2.5：失误
GLM-4-0520：错误
智谱清言：失误
豆包：失误
文心 4：失误
百川 4：失误
填空题三
（2个模型答复错误，5个答复失误）
GPT-4o：错误
通义千问 2.5：失误
GLM-4-0520：错误
智谱清言：失误
豆包：失误
文心 4：失误
百川 4：失误
