今天凌晨,Anthropic CEO达里奥·阿莫德伊发表了一篇题为《我们必须控制前沿AI的发展节奏》的长文。文章发布后,OpenAI创始人奥特曼迅速表示赞同,并称OpenAI也会引入类似的评估机制。特斯拉创始人马斯克也公开支持这一观点。三位科技大佬在同一个议题上达成共识,这在他们之间是少见的。
三年前,面对“暂停训练AI”的呼吁,达里奥并未响应,认为当时时机不成熟。现在他改变了看法,原因是他看到了两个关键问题:递归自我改进(RSI)已在全行业出现,且AI智能体已经暴露出具体的失控行为。他预测未来6-12个月内,AI Agent集群可能接管整个互联网,造成数千亿美元的损失。
达里奥提议全球头部AI公司先开放让第三方评估机构进驻,然后共同划定AI发展的红线,最后推动这些规则在全球范围内实施。他认为,在此之前,必须确保自己还握着方向盘。
为什么现在才喊减速?达里奥解释说,2023年那波“暂停训练AI”的呼声在他看来没有意义,因为当时的模型不够强大,无法进行重大欺骗或攻击。但如今情况不同,当前的模型几乎是一个无穷无尽的洞察力来源,包含如何构建好人工智能以及如果构建不好可能出现的问题。放慢步伐可以让公司在模型达到关键能力水平之前有更多时间调整,从而降低风险。
放缓后,Anthropic将专注于卓越运营、对齐、可解释性和测试评估等领域。卓越运营涉及培训和部署大模型的巨大挑战,需要更好的执行;对齐则确保模型安全、合乎道德并真正有用;可解释性帮助理解模型内部运作;测试评估则随着模型能力增加而变得更加复杂。
达里奥建议美国同行一起踩刹车,否则单方面减速可能会吃亏。他建议几家前沿AI公司共同设定安全红线和能力检查点,每跨过一个危险门槛,就必须提供相应的安全证据才能继续前进。他还提出限制训练算力和方式,直接给RSI加一道限速器。
近年来,随着人工智能技术的迅猛发展,利用AI进行诈骗、侵权等事件频发,一些行为已影响到部分行业的良性发展,侵犯了消费者的权益。
2025-05-07 14:34:53滥用AI会踩进哪些法律雷区近日,有网友拍到,赵丽颖与儿子想想一起逛公园,赵丽颖光脚陪儿子踩沙子。玩累了颖宝还背着想想往外走,真的是理想型好妈妈。...
2025-05-15 11:41:08赵丽颖光脚陪儿子踩沙子理想汽车官方宣布,其CEO李想已经回归。理想计划于12月25日至12月27日举办2024理想AI Talk活动,预计由李想主持
2024-12-20 16:53:25理想汽车宣布李想回归随着AI的快速发展,关于AI涉及的道德问题、技术边界以及是否会毁灭人类的话题,从科幻作品逐渐变为现实世界中需要严肃讨论的问题。这些问题甚至开始影响到全球AI领域的估值
2026-09-15 21:44:25AI巨头为何主动踩刹车3月7日上午,全国政协十四届三次会议第二场“委员通道”举行。全国政协常委、致公党中央副主席、中国电子学会理事长徐晓兰接受了采访。徐晓兰谈到通用人工智能与工业互联网结合带来的变化
2025-03-08 11:10:24委员