网易首页 > 网易号 > 正文 申请入驻

从参数规模转向场景效率,小模型也能有大作为

0
分享至

过去几年,大模型行业习惯用参数规模衡量能力。模型越大,通常意味着训练数据更多、推理能力更强,也更接近能力上限。

但当AI真正进入手机、PC、电动汽车、智能家居和机器人等终端后,参数规模不再是唯一标准。模型还必须满足低延迟、低成本、低功耗、易部署和数据本地化等现实要求。对于终端厂商和企业来说,一个理论能力更强,却跑不起来、用不起或难以适配的模型,实际价值并不高。



AI竞争正在因此发生变化。云端大模型继续追求能力上限,端侧模型则需要在有限算力和功耗条件下,把具体任务做好。行业关注的重点,也开始从模型有多大,转向模型在真实场景中是否高效。

9月1日,科大讯飞全资子公司词元星火开源星火X2.5-4B和星火X2.5-1.7B两款端侧通用大模型。两款模型原生支持最长100万Token上下文,并强化代码、智能体和指令遵循能力。同时,模型权重、代码仓库和部署文档同步开放,支持多类硬件平台及主流推理框架。

这次开源释放出的行业信号是,端侧模型不必复制云端大模型的规模,也可以通过针对性设计和工程适配,在具体设备与任务中形成实用能力。

端侧模型拼的不是“大而全”,而是“够用且高效”

端侧AI的发展,首先是被现实需求推出来的。

云端模型拥有更充足的算力和更强的通用能力,但每次推理都要经过数据上传、云端处理和结果回传。随着AI应用和智能体快速普及,推理需求持续增长,云端成本、网络延迟和数据安全问题逐渐突出。

相关行业报告显示,2026年AI推理计算需求预计达到训练需求的4至5倍。大量请求集中在云端,不仅会增加基础设施压力,也会带来持续的调用成本。自动驾驶、智能座舱和工业控制等场景对响应速度要求极高。办公、医疗和金融等场景则涉及合同、客户资料、研发代码等敏感信息,不适合频繁上传至外部服务器。

端侧模型可以把部分推理能力放回设备本身,让高频、实时、隐私敏感或弱网环境下的任务在本地完成。它的价值不在于全面取代云端,而在于提供一条更贴近设备和用户的运行路径。

这也决定了端侧模型不能简单追求参数规模。手机、PC、汽车和机器人拥有不同的内存、算力与功耗条件。模型越大,部署门槛和运行成本往往越高。相比之下,一个参数规模更小、但经过场景优化的模型,可能更适合承担本地问答、文档处理、语音交互和设备控制等高频任务。

小模型并不是大模型的低配版,而是一种面向落地的技术方案。它的通用能力可能没有云端旗舰全面,但部署成本更低,响应速度更快,也更容易围绕具体业务进行优化。模型不需要什么都懂,而是要在用户真正需要的地方足够稳定。

星火X2.5-4B&1.7B的真正价值,是把有限参数变成有效能力

星火X2.5-4B和1.7B的能力设计,正对应了端侧AI落地中的几个关键问题。

首先是长上下文能力。端侧模型过去常常受限于上下文窗口,面对完整的产品手册、项目资料或代码仓库,需要将内容切分后分段处理。信息被拆开之后,章节之间的关联、前文提出的限制条件以及多轮对话中的关键信息,都可能被遗漏。

星火X2.5-4B&1.7B原生支持最长100万Token上下文,使模型能够在同一个任务空间中处理更完整的资料。对于办公场景,它可以更连续地理解企业文档、业务规则和历史信息。对于智能硬件,它也能够处理包含多个条件的复杂指令。

长上下文的意义,并不只是容纳更多文字,而是让小模型在具体任务中拥有更完整的判断依据。

代码和智能体能力,则让模型能够进一步参与任务执行。真实办公并不是生成一段文字就结束了。模型还需要读取数据、执行计算、调用工具,并根据结果继续推进。办公需要处理表格和文档,智能家居需要调用设备接口,机器人则要结合环境信息规划动作。

星火X2.5强化代码、智能体和指令遵循能力,意味着模型可以围绕一个目标参与更多连续环节。长上下文帮助模型理解任务背景,代码能力支持数据处理和脚本执行,智能体能力推动任务拆解与工具调用,指令遵循则让结果更贴合用户要求。

几项能力结合起来,端侧模型的评价方式就不再只是看参数大小,而是看它能否在有限资源下稳定完成任务。少占资源、少依赖网络,并在具体业务中持续产生有效结果,这才是场景效率的核心。

开源也让这种效率更容易被验证和放大。星火X2.5-4B&1.7B支持英伟达、华为、海光、后摩等多类硬件平台,兼容vLLM、SGLang、llama.cpp等主流推理框架,并支持通过相关工具进行部署和增量微调。开发者和硬件厂商可以根据自身需求完成适配,将模型接入企业内网、办公软件和智能终端。

未来,端侧AI不会取代云端,而会与云端形成更清晰的分工。云端承担复杂推理和大规模任务,端侧处理高频、实时、隐私敏感的本地需求。

大模型决定AI能力的上限,小模型决定AI能否进入更多设备和场景。星火X2.5-4B&1.7B的开源说明,AI竞争正在从参数规模转向场景效率。模型只有真正跑起来、用起来,并在现实环境中稳定完成任务,才算完成了从技术能力到产业价值的转换。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
女子无意中摔坏孩子的双层保温碗,瞬间头皮发麻:里面满是霉菌,水都是臭的

女子无意中摔坏孩子的双层保温碗,瞬间头皮发麻:里面满是霉菌,水都是臭的

扬子晚报
2026-10-21 10:57:25
势在必得!19岁亚马尔包机带亲友团去金球奖典礼 提前安排派对庆祝

势在必得!19岁亚马尔包机带亲友团去金球奖典礼 提前安排派对庆祝

我爱英超
2026-10-22 16:44:01
马德兴:因凡蒂诺抵达东京,希望在亚足联内部拉到足够的选票

马德兴:因凡蒂诺抵达东京,希望在亚足联内部拉到足够的选票

懂球帝
2026-10-22 16:32:44
想不到,芭莎盛典这一夜,40岁张小斐会因救场举动实现口碑暴涨

想不到,芭莎盛典这一夜,40岁张小斐会因救场举动实现口碑暴涨

胡鋇就爱无拘无束
2026-10-22 15:29:15
一撞就烧,一烧就删:聊聊陕西神木车祸

一撞就烧,一烧就删:聊聊陕西神木车祸

难得君
2026-10-22 09:24:13
“夺命碗”曝光:释放甲醛、重金属,很多人还总用,赶紧扔!

“夺命碗”曝光:释放甲醛、重金属,很多人还总用,赶紧扔!

家居设计师苏哥
2026-10-22 12:15:07
“盒马的熟食铲怎么像猫砂铲?” 洛阳一消费者发帖后,盒马更换了厨具

“盒马的熟食铲怎么像猫砂铲?” 洛阳一消费者发帖后,盒马更换了厨具

信网
2026-10-21 17:43:06
“东莞前首富”,10亿算力故事烂尾?

“东莞前首富”,10亿算力故事烂尾?

中国新闻周刊
2026-10-22 21:31:08
越算越紧的养老账!企业职工养老保险八成靠保险费,机关事业单位四成靠财政补贴

越算越紧的养老账!企业职工养老保险八成靠保险费,机关事业单位四成靠财政补贴

可达鸭面面观
2026-10-20 17:18:44
哇塞!41分!杨瀚森首秀来了,进步了……

哇塞!41分!杨瀚森首秀来了,进步了……

体育新角度
2026-10-22 14:03:50
山西103-92力克上海,威金顿26+8,张镇麟19分,拉塞尔18+10

山西103-92力克上海,威金顿26+8,张镇麟19分,拉塞尔18+10

懂球帝
2026-10-22 21:40:33
椰树开放参观“翻车”了!39年保密车间首迎客,员工生产线脱鞋引食品安全争议

椰树开放参观“翻车”了!39年保密车间首迎客,员工生产线脱鞋引食品安全争议

火山詩话
2026-10-22 18:57:02
北京男篮露冠军相,大胜深圳58分,周琦只打8分钟,沃特斯7记三分

北京男篮露冠军相,大胜深圳58分,周琦只打8分钟,沃特斯7记三分

替补席看球
2026-10-22 21:23:05
又掀桌子!30吨载重的第二架原型机现身,中国有了自己的大力神

又掀桌子!30吨载重的第二架原型机现身,中国有了自己的大力神

淡然小司
2026-10-22 07:09:17
张嘉译陈宝国聚餐照流出,一个身材壮实,一个脸通红,李冉冉也在

张嘉译陈宝国聚餐照流出,一个身材壮实,一个脸通红,李冉冉也在

妙知
2026-10-21 15:47:46
“仇人都干不出这种事”,宝妈晒小学女儿新发型,满满的恶意传来

“仇人都干不出这种事”,宝妈晒小学女儿新发型,满满的恶意传来

熙熙说教
2026-10-20 17:34:26
魏莹“陪睡”案新进展:案件细节太颠覆,三方口述揭露更多内幕!

魏莹“陪睡”案新进展:案件细节太颠覆,三方口述揭露更多内幕!

莫地方
2026-10-22 10:22:36
妻子约男网友宾馆缠绵,事后男网友要收钱,2012年她拒付嫖资被分尸了

妻子约男网友宾馆缠绵,事后男网友要收钱,2012年她拒付嫖资被分尸了

汉史趣闻
2026-10-22 14:58:02
A股:午后突加速跳水破3650,种种迹象表明,A股熊市已宣告开始了吗?

A股:午后突加速跳水破3650,种种迹象表明,A股熊市已宣告开始了吗?

趋势小诸葛
2026-10-22 14:34:47
弗格16分广东战胜广厦止住连败,外教需要反思博日奇的使用

弗格16分广东战胜广厦止住连败,外教需要反思博日奇的使用

李广专业体育评论
2026-10-22 21:34:00
2026-10-22 22:23:00
秋水笔弹
秋水笔弹
远慕《梦溪笔谈》,心向往之
42文章数 12关注度
往期回顾 全部

科技要闻

腾讯云谷歌紧急行动!互联网安全出大事

头条要闻

大火逼近中国 日本道歉只道一半:未对中国有任何表示

头条要闻

大火逼近中国 日本道歉只道一半:未对中国有任何表示

体育要闻

卢卡:伦德伯格,欢迎来到NBA

娱乐要闻

芭莎盛典,张小斐因救场实现口碑暴涨

财经要闻

宁德,跌成了一只红利股?

汽车要闻

搭城市NOA/续航555KM 捷达M6上市售7.98万起

态度原创

艺术
教育
手机
数码
军事航空

艺术要闻

赵无极 80岁画的《紫气东来》,1667.5万!

教育要闻

进校机会?来看这份校庆/校友日指南!

手机要闻

苹果iPhone Duo 2有望支持Face ID,微信客服回应适配问题

数码要闻

达标没!商务部公布我国家庭平均拥有电视、冰箱、洗衣机、手机数量

军事要闻

泽连斯基"愿以领土换和平协议" 普京表态

无障碍浏览 进入关怀版