中华网 china.com

新闻

北京网友测试教育大模型9.9比9.11大 8大模型犯错揭示短板

关键词:
2024-07-19 08:05:47  海报新闻

北京网友测试教育大模型9.9比9.11大

近期,一个看似简单的数学问题挑战了众多先进的人工智能大模型,引发了业界关注。问题本身并不复杂:9.11和9.9哪个数字更大?然而,在第一财经进行的测试中,即便是部分知名大模型,如阿里通义千问、百度文心一言、Minimax及腾讯元宝,能够给出正确答案,仍有包括ChatGPT-4o在内的8个大模型给出了错误判断,它们大多错误地对比了小数点后的数字。北京网友测试教育大模型9.9比9.11大!

北京网友测试教育大模型9.9比9.11大

这种情况暴露了大模型在处理数学问题时的局限性,尽管它们在文字处理和某些特定任务上表现出色,但数学能力却显得薄弱。部分行业专家指出,这可能源于大模型的设计更偏向于模拟人类的语言思维模式,而非逻辑严谨的数字处理方式。生成式语言模型在学习过程中更多地掌握了语言的关联性,而非数学所需的因果逻辑和严谨推理。

北京网友测试教育大模型9.9比9.11大 8大模型犯错揭示短板

此次事件起因于一档综艺节目中的投票率比较,进而引发了公众对AI数学能力的讨论。测试显示,即便是在明确了数学语境的前提下,一些大模型依然未能正确解答。有趣的是,当记者对错误答案提出质疑后,多数大模型能自我纠正,承认之前的失误并给出正确答案,显示出一定的自我调整能力。

北京网友测试教育大模型9.9比9.11大 8大模型犯错揭示短板

长期以来,大模型在数学处理上的不足已不是新鲜事。即便是最先进的模型,如GPT-4,在面对高考级别的数学试题时也表现不佳,显示出在数学逻辑和复杂推理上的缺陷。这不仅仅是数字识别或计算的问题,更是模型缺乏数学思维和灵活应用公式的能力体现。

北京网友测试教育大模型9.9比9.11大 8大模型犯错揭示短板

为改善这一状况,研究者们正探索通过针对性的语料训练来提升大模型的理科能力,特别是加强其在数学推理上的训练。未来,构造型数据的使用可能会成为关键,即通过系统地设计包含数学问题解决过程的数据来引导模型学习,而非仅仅依赖互联网上的既有文本数据。这对于推动大模型在金融、工业等高要求领域的应用至关重要,因为在这些场景下,数学的准确性和逻辑推理的可靠性是不可或缺的。

北京网友测试教育大模型9.9比9.11大 8大模型犯错揭示短板

北京网友测试教育大模型9.9比9.11大 8大模型犯错揭示短板

北京网友测试教育大模型9.9比9.11大 8大模型犯错揭示短板

北京网友测试教育大模型9.9比9.11大 8大模型犯错揭示短板

北京网友测试教育大模型9.9比9.11大 8大模型犯错揭示短板

北京网友测试教育大模型9.9比9.11大 8大模型犯错揭示短板

北京网友测试教育大模型9.9比9.11大 8大模型犯错揭示短板

(责任编辑:卢其龙 CN070)
关闭

拜登退选呼声再现 疫情下的竞选困境加剧

拜登退选呼声再现2024-07-19 08:05:39

谁的娃哈哈?宗馥莉疑似辞职引发争议 股权架构埋下危机伏笔

谁的娃哈哈?宗馥莉疑似辞职引发争议 股权架构埋下危机伏笔2024-07-19 08:05:21

度华年番外真是什么都敢拍 虚构娱乐引热议

度华年番外真是什么都敢拍2024-07-19 08:04:54

拜登退选呼声再现 疫情下的竞选困境加剧

拜登退选呼声再现2024-07-19 08:05:39

泽连斯基批评莫迪访俄“令人失望”,印度召见乌克兰大使表达抗议

泽连斯基批评莫迪访俄“令人失望”,印度召见乌克兰大使表达抗议2024-07-18 09:58:54

“欧洲人不禁要问:我们是美国听话的下属吗?”

“欧洲人不禁要问:我们是美国听话的下属吗?”2024-07-17 10:50:23

中国男子称在泰国遭同胞抢劫勒索 警方介入调查中

中国男子称在泰国遭同胞抢劫勒索2024-07-19 07:48:58

成都一公园日薪700招“野人”?假的 官方辟谣勿信谣传谣

成都一公园日薪700招“野人”?假的2024-07-19 07:51:05

泽连斯基签署新海上安全战略法令 强化黑海区域安全

泽连斯基签署新海上安全战略法令2024-07-19 07:50:34

欧尔班致信提醒欧盟:如特朗普当选,支持乌克兰战争的财政负担将转移到欧盟身上

欧尔班致信提醒欧盟:如特朗普当选,支持乌克兰战争的财政负担将转移到欧盟身上2024-07-18 10:12:00

归化专家:足协正高度关注16岁的斯洛文尼亚籍华裔边锋廖杨洋

归化专家:足协正高度关注16岁的斯洛文尼亚籍华裔边锋廖杨洋2024-07-19 07:47:06

动用主战舰艇、贴近实战应用,中俄“海上联合”演习收官,亮点有哪些?

动用主战舰艇、贴近实战应用,中俄“海上联合”演习收官,亮点有哪些?2024-07-18 09:54:24

母亲吸毒,痛骂特朗普,被特朗普选为竞选搭档的万斯,是何许人?

万斯深情介绍母亲:她10年没再吸毒2024-07-19 07:48:02

华域汽车董事长总经理同日辞职 高层大调整落幕

华域汽车董事长总经理同日辞职2024-07-19 07:47:41

美国国防情报局局长炒作“中国威胁论”

美国国防情报局局长炒作“中国威胁论”2024-07-18 09:41:43

谁的娃哈哈?宗馥莉疑似辞职引发争议 股权架构埋下危机伏笔

谁的娃哈哈?宗馥莉疑似辞职引发争议 股权架构埋下危机伏笔2024-07-19 08:05:21

外媒:泽连斯基称不担心特朗普可能重返白宫,“共和党多数人支持乌克兰”

外媒:泽连斯基称不担心特朗普可能重返白宫,“共和党多数人支持乌克兰”2024-07-17 10:11:27

特朗普提议对华课重税遭警告 经济学家警示贫富差距加剧

特朗普提议对华课重税遭警告2024-07-19 07:47:52

俄美安理会激烈交锋:俄外长猛批美国霸权政策,美代表辩称并非压制他国

俄美安理会激烈交锋:俄外长猛批美国霸权政策,美代表辩称并非压制他国2024-07-18 09:55:31

爆料!“他一直在努力挽回特朗普,甚至…”

爆料!“他一直在努力挽回特朗普,甚至…”2024-07-18 09:34:32

欧盟拒绝欧尔班的和平提议:俄乌问题不能没有乌克兰参与

欧盟拒绝欧尔班的和平提议:俄乌问题不能没有乌克兰参与2024-07-18 09:50:11

美欧密集宣示AI军事化动向,专家:相关动态值得高度关注

美欧密集宣示AI军事化动向,专家:相关动态值得高度关注2024-07-18 09:54:52

欧洲担忧特朗普不支持对俄制裁,法媒:若他上台可能放弃乌克兰,迫使乌谈判结束战争

欧洲担忧特朗普不支持对俄制裁,法媒:若他上台可能放弃乌克兰,迫使乌谈判结束战争2024-07-18 09:59:18

奥巴马建议拜登重新评估其候选人资格 政治遗产成焦点

奥巴马建议拜登重新评估其候选人资格2024-07-19 08:04:03

男子被困洪水中抱树求生 3小时惊险守望终获救

男子被困洪水中抱树求生2024-07-19 07:50:07

日本被曝计划挪用俄罗斯遭冻结资产,援乌数十亿美元

日本被曝计划挪用俄罗斯遭冻结资产,援乌数十亿美元2024-07-18 09:46:26

巴黎奥运会难民代表团抵达法国 多元化团队共赴梦想之旅

巴黎奥运会难民代表团抵达法国2024-07-19 07:49:15

美军隐形战斗机对华C形包围圈成形,然后呢?

美军隐形战斗机对华C形包围圈成形,然后呢?2024-07-18 09:32:32

度华年番外真是什么都敢拍 虚构娱乐引热议

度华年番外真是什么都敢拍2024-07-19 08:04:54

这个美国大佬,怂了

这个美国大佬,怂了2024-07-18 09:28:56

抓娃娃式鸡娃:孩子成才取决于什么?教育观念是关键

抓娃娃式鸡娃:孩子成才取决于什么2024-07-19 07:47:20

山东舰编队持续一周在太平洋上训练

山东舰编队持续一周在太平洋上训练2024-07-18 09:40:18

多家车企陆续退出价格战 豪华品牌转向价值修复之路

多家车企陆续退出价格战2024-07-19 08:03:47

自动驾驶公交在海口美兰机场上线 引领智慧出行新时代

自动驾驶公交在海口美兰机场上线2024-07-19 07:51:13

美国发现:她是韩国秘密特工

美国发现:她是韩国秘密特工2024-07-18 09:36:12

相关新闻