
你可能听说过大型语言模型,即能生成类人文本的人工智能系统。但是小型语言模型呢?研究人员正在努力研发更小型、更紧凑的人工智能系统,以解决人工智能系统对数据日益增长的需求所带来的一系列挑战。而且,不只是如今新闻报道中的生成式人工智能模型需要变得更小,那些能够运营工业设施、智慧城市或自动驾驶汽车的人工智能系统也需要如此。
大型人工智能模型面临的挑战
当你使用人工智能(无论是在手机还是笔记本电脑上)时,大部分实际计算都发生在数据中心。这是因为最流行的人工智能模型在计算上非常耗费资源——你的笔记本电脑可能没有足够的计算能力来运行查询。这些人工智能系统还会消耗大量能源。据说,在生成式人工智能模型中进行一次查询(例如问“生成式人工智能是如何工作的?”这样一个问题)所消耗的电量相当于一个灯泡点亮一小时的电量。
这给人工智能的使用带来了两个挑战。首先,这引发了人们对人工智能可持续性的担忧,因为为人工智能供电的电力也会增加温室气体排放。
在最近一项针对全球技术领导者的调查“TheImpact of Technology in 2025 and Beyond: an IEEE Global Study”中,35%的人表示人工智能的实用性远远超过其能耗,而34%的人表示人工智能的能耗和实用性处于良好的平衡状态。大约五分之一(21%)的人认为人工智能的益处是显著的,但高能耗仍然是一个问题,而8%的人认为大量的能耗超过了人工智能的益处。
其次,这意味着任何依赖人工智能的事物要么需要更多的电力来运行,要么需要连接到数据中心。
削减人工智能规模的前沿技术正在取得一些成功。
IEEE会员Jay Shah表示:“这些(技术)耗电量显著降低,通常在瓦特范围内运行,而不是大型数据中心系统消耗的千瓦或兆瓦。”
谁需要紧凑型人工智能?
更小、更节能的人工智能系统可以用于多种应用,比如自动驾驶汽车。
Shah说:“就长期可靠性和降低功耗而言,下一代低功耗人工智能加速器对自动驾驶汽车的未来至关重要。它们能够实现实时决策并实现更紧凑的设计。”
同时,它们对机器人系统来说也是个福音,因为它们将降低机器人的电力需求。
IEEE高级会员Cristiane Agra Pimentel表示,紧凑型人工智能系统在工业环境中也将很有用,在这种环境中,更小的控制系统可以使工厂流程自动化。
Pimentel说:“在工业领域使用紧凑型人工智能将越来越适用于机器操作控制、产品追溯控制和供应链系统管理。”
小型人工智能存在权衡取舍
大型语言模型通常适用于多种用途。它们可以协助撰写大学论文,还能帮你构建网站。紧凑型系统可以针对特定系统进行优化。它们可以被设计成公司的聊天机器人或者自动补全计算机代码。
但是,紧凑型人工智能系统目前准确性较低,因为它们通常使用较少的数据。
Shah表示:“考虑到低功耗、更快的推理时间以及在边缘设备上运行人工智能的能力等好处,这些权衡通常是可以接受的。研究人员和开发人员会继续努力提高紧凑型人工智能系统的准确性,同时保持其效率优势。”
最新发现
相关资讯
科大讯飞总裁吴晓如:大模型协同大过竞争
科大讯飞总裁吴晓如:大模型协同大过竞争产业端特别是传统产业,尚不能感受大模型发展带来的变革?吴晓如表示,接受大模型较快的是数字化程度较高的领域,它们有丰富的数据;其次是应用价值较大的领域,它们对数
2025-10-14 11:11:47
清华系前腾讯Robotics X核心成员创业,业内首款能“单手玩手机”的灵巧手来了|涌现新项目
一款能把脉、操作鼠标的“六边形”产品。
2025-09-17 11:00:00
华为全新小艺拟人化实时音视频对话功能适配机型公布,含MateXTs三折叠等
华为小艺智慧助手已在今年8月底推送了1137300版本升级,部分机型在更新该版本的小艺智慧助手后,新增支持“小艺看世界”功能。目前华为官网已公布该功能适配机型,包含MateXTs三
2025-09-17 10:30:00
通义千问系列最强大的语言模型:Qwen3-Max-Preview上线
阿里通义千问今日在官网和OpenRouter上线了最新的Qwen-3-Max-Preview模型。根据官网描述,该模型是通义千问系列中最强大的语言模型。
2025-09-17 10:00:00
AMD谈AI显卡:没有性能就没有人买推理一直有优势
9月5日消息,GPU显卡不仅决定了游戏性能,也是AI领域各大厂商竞争的焦点,NVIDIA一家占了90%以上的份额,AMD也紧追不舍。AMDCFO首席财务官JeanHu日前在花旗TMT大会上也谈到了
2025-09-17 09:30:00
支持百万卡扩展,中科曙光发布国内首个开放架构AI超集群系统
该系统以GPU为核心,实现了“算、存、网、电、冷、管、软”一体化紧耦合设计,可为万亿参数大模型训练推理、行业大模型微调、多模态大模型开发、AI4S等场景提供算力底座。
2025-09-17 09:00:00
今日热榜
当AI制药不再讲故事
2025-03-12 17:29:46ZCOOLxCanva可画:Canva可画创作者大赛“变飞为宝计划”,4/3截止征集
2025-06-21 13:01:44“AI+养老”,晚年更美好
2025-01-15 18:30:24东信集团发布首个AIGC营销大模型,赋能智能营销
2025-04-30 11:31:48美国人工智能政策与中国应对策略
2025-05-06 11:25:29男子用AI造谣“女儿被抱走”:内容是编的图是网上找的
2025-08-07 09:20:35AI体育训练场“常驻”京张遗址公园
2025-02-11 14:50:36深圳人工智能先锋城市建设加速推进
2025-05-04 19:56:38“国内AIApp产品TOP100”榜单揭晓美图秀秀斩获第三名
2025-02-24 16:54:27爱奇艺融入AI搜索,首次将生成式AI(AIGC)应用于剧情搜索等三大场景
2025-07-06 13:00:48热门推荐