中华网 china.com

新闻

大模型“高考”考生数学都不及格 语文英语显优势，数学能力待加强

小 大

用微信扫描二维码
分享至好友和朋友圈

关键词：
2024-06-20 06:07:10  第一财经

高考，作为一项涵盖广泛学科和题型的考试，因其考前的高度保密性，被视为中国最具权威性的测试之一。近期，它成为了评估高级人工智能模型智力水平的重要工具。上海人工智能实验室的OpenCompass平台挑选了7个顶尖的人工智能模型，让它们参加了包括语文、数学、英语在内的全科目模拟高考。

大模型“高考”考生数学都不及格

测试结果于6月19日公布，阿里通义千问2-72B以303分的总分位居榜首，紧接着是OpenAI的GPT-4o，得分为296分，而上海人工智能实验室的书生·浦语2.0则获得第三名。这三个模型的得分均超过了70%的及格线，而法国初创公司Mistral的模型则排名最后。

大模型“高考”考生数学都不及格 语文英语显优势，数学能力待加强

参与这次测评的模型涵盖了国内外多家企业和机构，既有开源的也有如GPT-4o这样的闭源模型。值得注意的是，为了确保公平性，仅选取了在考前已公开的模型，避免了可能的针对性训练。

测试显示，尽管这些大模型在语文和英语科目中表现出色，但它们的数学成绩普遍不佳，无一及格。其中数学最高分75分出自书生·浦语2.0，GPT-4o紧随其后，得了73分。语文最高分归于通义千问，而英语则是GPT-4o领先。

数学成为大模型面临的一大挑战，它要求复杂的推理能力，这对于模型在金融、工业等领域实现可靠应用至关重要。上海人工智能实验室的领军人物林达华指出，复杂推理直接关联到模型在诸如金融场景中的数据准确性，以及处理专业文档时的精确计算能力，这些是当前大模型应用向更严肃商业环境扩展的障碍。

关闭

美公民配偶及子女合法居留限制放宽 拜登新政抢夺选民支持

美公民配偶及子女合法居留限制放宽2024-06-20 06:04:05

郑州发生6车连环相撞事故 4人受伤 交通安全警钟再响

郑州发生6车连环相撞事故 4人受伤2024-06-20 06:03:56

上海迎“暴力梅”开启雨雨雨模式 今年梅雨来势汹汹？

上海迎“暴力梅”开启雨雨雨模式2024-06-20 06:02:06

丑闻！英方这场针对中国的行动曝光了

丑闻！英方这场针对中国的行动曝光了2024-06-19 09:36:44

美海军“勇敢之盾”演习击沉退役船坞登陆舰

美海军“勇敢之盾”演习击沉退役船坞登陆舰2024-06-19 09:39:39

李瑞峰称中国品牌不可以向下 长城汽车的自我革新之路

李瑞峰称中国品牌不可以向下2024-06-19 22:56:09

争论不休，欧盟未敲定新领导层！

争论不休，欧盟未敲定新领导层！2024-06-19 09:48:48

梅州老人被困坍塌房屋40多小时获救 暴雨致灾情严峻

梅州老人被困坍塌房屋40多小时获救2024-06-19 22:59:23

郑州发生6车连环相撞事故 4人受伤 交通安全警钟再响

郑州发生6车连环相撞事故 4人受伤2024-06-20 06:03:56

菲律宾的这次冒险，五个值得注意的细节

菲律宾的这次冒险，五个值得注意的细节2024-06-19 09:29:25

为了在西太平洋有立足点，美军看上了它……

为了在西太平洋有立足点，美军看上了它……2024-06-19 09:30:33

博主：淄博城管又火了

博主：淄博城管又火了2024-06-19 22:58:23

美公民配偶及子女合法居留限制放宽 拜登新政抢夺选民支持

美公民配偶及子女合法居留限制放宽2024-06-20 06:04:05

内塔尼亚胡宣布战时内阁已解散

内塔尼亚胡宣布战时内阁已解散2024-06-18 09:52:26

盘点陈晓陈妍希近两年反常事！

盘点陈晓陈妍希近两年反常事2024-06-19 22:54:27

暴雨过后村民巧用龙骨水车排水！

暴雨过后村民巧用龙骨水车排水2024-06-19 22:53:47

一行一局一会”陆家嘴都说了什么：金融领航经济新增长

“一行一局一会”陆家嘴都说了什么2024-06-19 22:59:54

记者：足协裁判评议制度真的不错

记者：足协裁判评议制度真的不错2024-06-19 22:54:43

美军想把钻井平台改成海上要塞！批评者质疑：建设和运营成本可能远超预期

美军想把钻井平台改成海上要塞！批评者质疑：建设和运营成本可能远超预期2024-06-19 10:00:30

台“铭传舰”士兵深夜从舰跳海游上岸，自称“不想当兵”

台“铭传舰”士兵深夜从舰跳海游上岸，自称“不想当兵”2024-06-19 09:40:11

SIPRI全球核力量年度报告发布，全球核武库出现哪些新变化？

SIPRI全球核力量年度报告发布，全球核武库出现哪些新变化？2024-06-18 09:58:55

欧冠预选赛第一轮抽签结果发布 诸强对阵出炉

欧冠预选赛第一轮抽签结果发布2024-06-19 22:53:59

真的建议报考上海交通大学 筑梦顶尖学府

真的建议报考上海交通大学2024-06-19 22:55:23

北约刚威胁完中国，美国竟暗示“进一步措施”

北约刚威胁完中国，美国竟暗示“进一步措施”2024-06-19 09:42:37

“欧洲防务展”上的欧洲最新坦克

“欧洲防务展”上的欧洲最新坦克2024-06-19 09:40:56

民进党为掩盖弊案涂黑调查资料！

民进党为掩盖弊案涂黑调查资料2024-06-19 22:59:11

朱婷领衔中国女排奥运25人名单 巴黎征程将启

朱婷领衔中国女排奥运25人名单2024-06-19 22:59:34

美媒发布最新视频称“艾森豪威尔”号航母未受损

美媒发布最新视频称“艾森豪威尔”号航母未受损2024-06-18 10:05:16

“扫清关键障碍”，荷兰首相吕特被曝即将接任北约秘书长

“扫清关键障碍”，荷兰首相吕特被曝即将接任北约秘书长2024-06-19 09:43:32

欧洲杯豪门球队谁最有“冠军相”！

欧洲杯豪门球队谁最有“冠军相”2024-06-19 22:55:02

布局70载，CIA要在印度本土建立一个国家？

布局70载，CIA要在印度本土建立一个国家？2024-06-19 09:45:04

上海迎“暴力梅”开启雨雨雨模式 今年梅雨来势汹汹？

上海迎“暴力梅”开启雨雨雨模式2024-06-20 06:02:06

“局部战术暂停”后 以军袭击加沙地带多地

“局部战术暂停”后 以军袭击加沙地带多地2024-06-18 10:04:37

欧洲杯最前线 英格兰赛前冒雨训练卢克肖缺席，下午前往法兰克福

欧洲杯最前线 英格兰赛前冒雨训练卢克肖缺席，下午前往法兰克福2024-06-19 22:54:14

为当北约秘书长，荷兰首相吕特跟欧尔班“谈条件”

为当北约秘书长，荷兰首相吕特跟欧尔班“谈条件”2024-06-19 09:53:32

相关新闻

主编邮箱
网上不良信息举报电话：010-56177181
关于中华网 | 广告服务 | 联系我们 | 招聘信息 | 版权声明 | 豁免条款 | 友情链接 | 中华网动态
版权所有 中华网