OpenAI联合创始人Ilya Sutskever指出,数据资源耗尽,下一代AI模型将是真正的AI Agent,且具备推理能力。
ChatGPT面世两年多以来,AI的主战场正在转向,从训练端转向一个规模更大、竞争更为激烈的领域:推理。推理被视作AI大模型的“下半场”,在上半场中,竞争聚焦于快速预训练响应,而如今,AI推理时代正在渐渐逼近,更多目光开始投向了慢速深度推理。
“AI预训练时代无疑将终结。” 在温哥华NeurIPS大会上,OpenAI联合创始人兼前首席科学家伊利亚•苏茨克维尔(Ilya Sutskever)直言。
今年5月离开OpenAI之后,Ilya Sutskever创立了自己的AI实验室Safe Superintelligence,之后他鲜少公开露面,直至这一次亮相。
Ilya Sutskever在这场演讲中将数据比作化石燃料,而燃料终将耗尽。“算力在增长,但数据却没有增长,因为我们只有一个互联网…… 我们已经达到了数据峰值,不会再有更多数据了,我们必须处理好现有的数据。”
现有数据仍可推动AI进一步发展,业内也正在竭力挖掘新数据进行训练,这种情况最终将迫使行业改变目前的AI模型训练方式。
其预计, 下一代AI模型将是真正的AI Agent,且具备推理能力 ——目前的AI主要根据大模型之前学习过的内容进行匹配,而未来的AI则能以更接近思考的方式来一步步解决问题。“它们能根据有限的数据理解事物,也不会感觉困惑。”他补充,AI推理得越多,就越难以预测。
一定程度来说,Ilya Sutskever的说法与OpenAI不久前的表态与最新动向不谋而合——用推理弥补数据瓶颈。
在11月末的一场路边谈话中,OpenAI高级研究副总裁Mark Chen否认了“Scaling Law撞墙”。他表示,“我们准 确地掌握了需要解决的技术挑战”,OpenAI已经有o系列和GPT系列两个模型,来让模型继续保持Scaling。
其中, OpenAI近日发布的o1模型就是推理模型。其最突出的地方便在于“会推理”: 在给出回答之前,o1会思考,通过产生一个很长的内部思维链(CoT),逐步推理,模仿人类思考复杂问题的过程。
这个过程也与Ilya Sutskever所说的“以更接近思考的方式来一步步解决问题”更加贴合。
或许对于一般用户而言,o1模型的这种转变不易察觉,但The Atlantic指出,研究人员已认识到, 与GPT等旧模型相比,o1模型不仅仅是一次简单的升级,而是标志着一个“完全不同的游戏规则”和“真正的进步”。
▌AI推理时代来了?
预训练时代或许行将落幕,而在AI算力“跷跷板”的另一头,推理正在崛起。
近几日多家券商研报都指出,随着端侧AI放量,豆包、ChatGPT等ai应用快速发展, 算力需求会加速从预训练向推理侧倾斜,推理有望接力训练,成为下一阶段算力需求的主要驱动力。
进一步来说,随着大规模AI模型普及,推理需求不断扩大并趋于多样化, 定制化芯片的需求也有望扩大。
巴克莱的另一份报告预计,AI推理计算需求将快速提升,预计其将占通用人工智能总计算需求的70%以上, 推理计算的需求甚至可以超过训练计算需求,达到后者的4.5倍。 英伟达GPU目前在推理市场中市占率约80%,但随着大型科技公司定制化ASIC芯片不断涌现,这一比例有望在2028年下降至50%左右。
博通上周发布的财报也已证明了ASIC的需求之旺盛:2024财年公司的人工智能收入增长220%,达到122亿美元;其预计AI产品收入将在2025财年第一财季同比增长65%。博通还透露,目前正在与三个非常大型的客户开发AI芯片,预计明年公司AI芯片的市场规模为150亿-200亿美元。
随着谷歌、AWS等科技巨头纷纷加大对定制化AI芯片的研发投入,以强化在人工智能领域的技术优势和供应链控制力,国金证券今日研报指出,这一趋势不仅助力企业应对日益复杂的 AI 需求,还推动了整个自研芯片赛道的高景气度和持续创新。未来,自研芯片将在 AI 推理和训练领域扮演关键角色,成为降本增效和提升算力的重要手段。
最新发现
相关资讯
河北省举办首届NeuroMaster脑科学人工智能挑战赛
河青新闻网讯 11月17日,2024世界机器人大赛——河北省首届NeuroMaster脑科学人工智能挑战赛,在石家庄市第一中学成功举办。NeuroMaster脑科学人工智能挑战赛竞赛方向围绕脑机接口在典型领域的应用发展,竞赛内容设
2025-01-15 11:08:38
聚焦人工智能“互联网之光”博览会今日开幕
大江网 大江新闻客户端讯 全媒体记者陈春伟报道:11月19日,由世界互联网大会和浙江省人民政府共同主办的2024年世界互联网大会“互联网之光”博览会在乌镇盛大开幕。本届博览会设置了五大活动板块,包括展览展示、
2025-01-15 10:48:35
AI造谣乱象“野蛮生长”?专家:可设置敏感关键词禁止生成显著违法信息内容
央广网北京11月19日消息(记者王迟)近年来,人工智能(AI)技术发展迅速,成为全球科技领域的热点。AI已经从单纯的学术研究发展成为改变人类生活方式的重要力量。然而,却有一些别有用心之人将其变为造谣、敛财
2025-01-15 10:28:26
“互联网之光”博览会今天开幕全面聚焦人工智能
作为2024年世界互联网大会乌镇峰会的重要活动之一,今天上午,“互联网之光”博览会正式开幕。在2024年世界互联网大会“互联网之光”博览会的现场,记者看到,“互联网之光”的开幕式就在这里进行。今年,“互联网之光”
2025-01-15 10:08:24
探营世界互联网大会“互联网之光”博览会:看AI如何打败AI
上传一张照片,就能利用AI技术鉴别照片是不是其他AI的伪造品;不法分子使用了AI换脸技术,也能被AI精准识破。11月19日,2024年世界互联网大会乌镇峰会开幕,人工智能再次成为热议话题。在“互联网之光”博览会的蚂
2025-01-15 09:48:17
你会给AI署名吗?
近日,微信公众号封面图已经可以在后台选择AI生成,AI作为工具,在新闻人工作场景中的使用也越来越普及。那么,AI生成的插图需要署名吗?新闻产品中AI的运用,该如何拥有姓名?01是否署名成行业分歧你有没有发现
2025-01-15 09:28:08
今日热榜
语文学习新解法:海豚AI学用科技因材施教
2025-01-06 17:23:58马来西亚设立国家人工智能办公室
2024-12-19 16:44:28通用人工智能,是个啥智能?
2025-01-06 17:44:07谷歌发布新一代人工智能技术
2024-12-19 16:43:53聚焦人工智能、区块链、量子科技等9大前沿领域,2024年上海市产业青年创新大赛颁奖大会在静安举行
2024-12-19 17:08:14花6.5万元购“AI数字人”直播带货被禁播?买家能解约吗?法院
2024-12-19 21:30:55通用人工智能国赛为何连续两年落地安徽?
2024-12-19 23:31:31新华网评:AI技术不应用来造谣生事
2024-12-20 06:52:57首部《中国通用人工智能发展报告》蓝皮书发布
2024-12-20 13:34:15欧盟《人工智能法案》生效在即
2024-12-20 14:14:25热门推荐