中华网 china.com

新闻

大佬喊话,AI寒冬已来?扩展策略已达极限(2)

关键词:
2024-11-14 10:39:47  新浪新闻

随着复杂性的增长,大模型必须能够在更长的对话中保持上下文,执行更复杂的任务,并响应数据中更微妙的线索。例如,像ChatGPT当前的LLMs可以在单次对话中生成令人印象深刻的连贯且与上下文相关的回应。但在长期交流中的上下文或处理复杂逻辑推理任务时,还存在很多困难。为了克服这一限制,未来的模型将需要实现更好的记忆机制和更复杂的处理能力,以便“思考”更长时间。

随着计算能力的持续增长,走在前列的大模型企业关注的重点逐渐从简单地扩展模型转向更高效和更具上下文智能发展。涉及神经网络、机器学习算法以及人工智能系统处理和保留信息的方式的技术进步的结合。未来有了更智能、思考更长时间的模型,人工智能可以变得更适应性,允许与用户进行更个性化、更准确、更有洞察力的互动。如果技术有进一步落地,人工智能应用也将会实现在从医疗保健到金融到客户服务等多个行业的突破。

Ilya Sutskever强调了人工智能研究中的关键时刻:随着LLMs的预训练阶段达到其极限,未来的进展取决于开发更智能的训练技术和提高模型在更长时间内保持上下文的能力。对于大模型企业来说,正确选择扩展的方向比以往任何时候都更为重要。大模型企业必须重新思考处理模型扩展的方法,少关注简单地增加更多数据和计算资源,更多地关注完善训练过程和开发能够更深入、更连贯地推理的模型。

SSI(Safe Superintelligence)由Ilya Sutskever、Daniel Levy和Daniel Gross三人创立,旨在开发远超人类能力的安全人工智能系统。他们的首要产品将是关于超级智能的安全。尽管没有发布任何产品,SSI在三个多月内筹集了10亿美元现金,公司估值达到50亿美元。Ilya Sutskever是人工智能领域最具影响力的技术专家之一,曾师从被称为“人工智能教父”的Geoffrey Hinton。Daniel Gross曾担任苹果公司AI技术负责人,也曾是前Y Combinator合伙人,而Daniel Levy则是OpenAI的前员工。

关闭

打的就是精锐!篮网开场接连抢断绿军 打出一波7-0拉开分差 约翰逊创0失误神纪录

打的就是精锐!篮网开场接连抢断绿军 打出一波7-0拉开分差2024-11-14 10:39:40

农历十月十五下元节 4件事不能做 传统习俗需谨记

农历十月十五下元节 4件事不能做2024-11-14 10:39:32

以军参谋长称对叙利亚进行深度打击 阻止武器转移

以军参谋长称对叙利亚进行深度打击2024-11-14 10:39:19

农历十月十五下元节 4件事不能做 传统习俗需谨记

农历十月十五下元节 4件事不能做2024-11-14 10:39:32

以军参谋长称对叙利亚进行深度打击 阻止武器转移

以军参谋长称对叙利亚进行深度打击2024-11-14 10:39:19

美国务卿布林肯突访北约 意在加速军事支持乌克兰

美国务卿布林肯突访北约 意在加速军事支持乌克兰2024-11-14 09:57:35

多国军事代表团围观:中国版“未来合成旅”来了!

多国军事代表团围观:中国版“未来合成旅”来了!2024-11-14 09:26:59

歼-20、歼-35A双剑合璧纪念章发布

歼-20、歼-35A双剑合璧纪念章发布2024-11-13 13:38:12

男童呼吸心跳骤停 养老机构医护人员出手相救

男童呼吸心跳骤停 养老机构医护人员出手相救2024-11-14 10:28:29

打的就是精锐!篮网开场接连抢断绿军 打出一波7-0拉开分差 约翰逊创0失误神纪录

打的就是精锐!篮网开场接连抢断绿军 打出一波7-0拉开分差2024-11-14 10:39:40

海陆空三军首次在珠海联合召开发布会!海军回应歼-15T和歼-15D有哪些改进

海陆空三军首次在珠海联合召开发布会!海军回应歼-15T和歼-15D有哪些改进2024-11-14 09:56:25

被问及土以贸易问题,埃尔多安:我们已断绝与以色列关系

被问及土以贸易问题,埃尔多安:我们已断绝与以色列关系2024-11-14 09:43:08

韩国真急了

韩国真急了2024-11-14 09:24:51

杨紫方称再次维权已取证 将采取法律行动

杨紫方称再次维权已取证2024-11-14 10:27:03

“天兔”加强为17级超强台风 将影响菲律宾等地

“天兔”加强为17级超强台风2024-11-14 10:28:00

凯恩谈多人退出国家队集训 国家队需求至上

凯恩谈多人退出国家队集训2024-11-14 10:38:07

Angelababy为经纪人庆生 圈内好友齐聚一堂

Angelababy为经纪人庆生2024-11-14 10:39:07

人民日报关注:高铁时代,我们为何还要修运河? 发挥水运比较优势

人民日报关注:高铁时代,我们为何还要修运河?2024-11-14 10:31:00

五角大楼将迎来“大换血”?特朗普团队被曝正拟定解雇名单

五角大楼将迎来“大换血”?特朗普团队被曝正拟定解雇名单2024-11-14 09:36:06

2025高校毕业生预计1222万人 就业焦虑升温

2025高校毕业生预计1222万人2024-11-14 10:26:41

“特朗普希望澳大利亚勇敢面对中国”

“特朗普希望澳大利亚勇敢面对中国”2024-11-14 09:45:18

无人机、无人车统统都有!我国发布8款最新地面装备

无人机、无人车统统都有!我国发布8款最新地面装备2024-11-13 13:35:12

特朗普提名卢比奥为国务卿候选人

特朗普提名卢比奥为国务卿候选人2024-11-14 09:42:00

“体寒”的当代反谍剧怎么破局 类型融合探新路

“体寒”的当代反谍剧怎么破局2024-11-14 10:35:00

阿姨用偏方减少正规药量致血糖失控

阿姨用偏方减少正规药量致血糖失控2024-11-14 10:30:55

谷圈是个什么圈?已有孩子被骗近万元!

谷圈是个什么圈2024-11-14 10:32:46

外媒:法方透露,以色列坚持随时打击黎巴嫩的能力,作为与黎真主党达成停火条件之一

外媒:法方透露,以色列坚持随时打击黎巴嫩的能力,作为与黎真主党达成停火条件之一2024-11-14 09:58:11

油价涨势“熄火”!14日92号汽油价格

油价涨势“熄火”!14日92号汽油价格2024-11-14 10:27:22

以色列战略事务部长被爆近期曾秘密访俄,克宫回应

以色列战略事务部长被爆近期曾秘密访俄,克宫回应2024-11-14 09:58:37

被指小孩偷奶茶后家长殴打店员 冲突视频引关注

被指小孩偷奶茶后家长殴打店员2024-11-14 10:30:03

相关新闻