网易首页 > 网易号 > 正文 申请入驻

300亿参数MoE大模型“装进”手机,高通携手合作伙伴推动端侧智能体落地

0
分享至

【环球网科技综合报道】当一个拥有300亿参数的MoE(混合专家)大模型能够完整部署在智能手机平台上,而无需依赖云端完成推理, AI体验会发生怎样的变化?北京时间9月22日,在2026骁龙峰会期间,高通宣布携手阶跃、无量火与江波龙开展四方合作,基于第六代骁龙8超级至尊版移动平台,将阶跃StepEdge-Omni 30B-MoE模型面向端侧进行深度适配与推理优化,打造具备自主服务和个性化能力的端侧智能体助手,并在峰会现场完成基于高通参考设计的演示,验证了复杂智能体AI工作流在智能手机上的部署与扩展能力。


第六代骁龙8超级至尊版移动平台

与每次推理均需激活全部参数的稠密模型相比,MoE模型仅按任务需要激活部分专家模块,在保持大模型容量与能力的同时,降低计算量和内存带宽需求。因此,MoE日益成为推动云端规模大模型向终端侧部署的技术路径之一,为智能体AI体验在智能手机、PC及其他终端落地提供了现实基础。

新一代移动平台为端侧大模型提供硬件支撑

第六代骁龙8超级至尊版移动平台搭载Qualcomm Oryon CPU、下一代Adreno GPU和重新设计的Hexagon NPU,并配备LPDDR6内存与高速存储通道,面向智能体AI体验提供计算支撑。

其中,定制Oryon CPU峰值频率达5GHz,并引入可扩展缓存架构Oryon FlexCache,支撑智能体多任务处理和系统规划能力;Adreno GPU引入针对AI负载打造的Adreno Matrix Cores,并支持Adreno Neural Fusion特性,将AI和图形处理结合;Hexagon NPU则面向智能体AI的Transformer工作负载引入Element Accelerator,并将大容量共享内存扩容50%,提升端侧推理性能。

四方协同优化,内存需求降低超50%

在硬件平台基础上,无量火的自研Ember推理引擎与Ember Kernel端侧编排内核,基于第六代骁龙8超级至尊版移动平台的AI性能和软件栈支持,以XCompute异构调度实现跨CPU/GPU/NPU的统一高性能编排,在不修改模型结构、不损失推理精度的前提下,使阶跃30B-MoE模型的运行内存需求较行业常规方案降低超50%。

基于江波龙提供的端侧AI存储解决方案,模型权重可从端侧闪存高效加载,通过存储与计算协同减少大模型对运行内存的持续占用,提升模型加载和运行效率。四方合作打造的端侧智能体助手,实现从邮件理解到行程规划、日历同步、航班酒店推荐、行程分享到邮件草拟的自主办公流程,全程本地完成,无需云端调用。

性能数据方面,得益于NPU+GPU双引擎协同,模型预填充吞吐性能超过330 Token/s,较NPU单引擎方案提升超过30%,解码吞吐性能超过28 Token/s,并能保持持续稳定运行,首个词元生成速率达到毫秒级,较云端API调用快数倍至数十倍。

端侧AI从概念走向规模化应用

高通技术公司高级副总裁兼手机业务总经理Chris Patrick表示,此次合作展现了硬件、软件、内存和AI模型等多个领域的技术进步,如何推动复杂的AI工作负载直接在移动终端上运行。通过与阶跃、无量火和江波龙合作,团队优化了阶跃30B-MoE模型在第六代骁龙8超级至尊版移动平台上的部署,在提升吞吐性能、降低内存需求的同时,实现了持续稳定的终端侧运行。这些成果有助于推动响应快速、注重隐私保护的AI体验直接在智能手机上运行。


高通技术公司高级副总裁兼手机业务总经理Chris Patrick

阶跃副总裁、端侧模型负责人俞刚表示,阶跃30B-MoE模型在第六代骁龙8超级至尊版移动平台上完成跑通和验证,平台的端侧算力释放了模型的推理能力,为低时延、高隐私的端侧智能体应用拓展了应用空间。

无量火CEO王瑜琨表示,基于第六代骁龙8超级至尊版移动平台,无量火自研的Ember推理引擎将大模型内存需求降低超过50%,让手机可以运行30B规模的MoE模型。期待与高通技术公司及生态伙伴深化协作,让手机成为个人智能终端,带来低延迟、高隐私的端侧AI体验。

江波龙副总裁、嵌入式存储事业部总经理黄强表示,端侧AI的规模化落地,离不开算力与存储的协同。江波龙将iSA存储智能体适配第六代骁龙8超级至尊版移动平台,通过存算协同释放平台算力价值,应对端侧大模型推理的存储需求。期待与高通技术公司持续深化生态协作,共同打造端侧AI解决方案,为终端用户带来稳定、可靠的本地AI体验。

从邮件处理到行程安排,一个300亿参数的智能体在手机本地完成全部推理,数据不出终端、响应以毫秒计——这项演示意味着,大参数MoE模型的端侧运行已从架构设想进入可验证的智能手机平台实践,并开始具备规模部署的技术条件。300亿参数MoE模型在旗舰移动平台上的完整端侧部署表明,通过模型架构与软硬件协同优化,智能手机正在具备运行更大规模模型、承载更复杂智能体任务的技术基础。随着硬件架构、推理引擎和存储方案的协同优化,更多复杂的AI能力有望在终端侧稳定运行,让个性化、低时延、注重隐私的智能体体验成为智能手机的日常功能。(心月)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
易建联“吃鸡”事件再度发酵!“女主”发文控诉阿联,嫖娼是事实,有监控作证!

易建联“吃鸡”事件再度发酵!“女主”发文控诉阿联,嫖娼是事实,有监控作证!

小贤看体育
2026-11-03 17:41:07
美民主党重掌国会 特朗普执政承重压

美民主党重掌国会 特朗普执政承重压

新华社
2026-11-04 16:34:25
谷歌指控深圳厂商给超130万台电视盒子装后门,拿用户家里宽带赚钱

谷歌指控深圳厂商给超130万台电视盒子装后门,拿用户家里宽带赚钱

西虹市闲话
2026-11-04 18:12:05
杨兰兰的巨额财富,至今没有说明怎么来的,澳洲方面有没有必要说明她怎么获得这些收入的?

杨兰兰的巨额财富,至今没有说明怎么来的,澳洲方面有没有必要说明她怎么获得这些收入的?

李昕言温度空间
2026-11-02 22:08:05
A股突然大反攻!原因找到了,三大利好浮出水面!

A股突然大反攻!原因找到了,三大利好浮出水面!

星图金融研究院
2026-11-04 15:48:05
CBA要提前大结局,上海队签约NBA超级外援,准备打爆北京队

CBA要提前大结局,上海队签约NBA超级外援,准备打爆北京队

宗介说体育
2026-11-04 14:12:46
李乃文演“张国焘”在全网火了,宋丹丹的评价,终于有人信了!

李乃文演“张国焘”在全网火了,宋丹丹的评价,终于有人信了!

陈述影视
2026-11-04 16:56:44
美国选民喊话特朗普:享受今晚吧,一切都结束了

美国选民喊话特朗普:享受今晚吧,一切都结束了

看看新闻Knews
2026-11-04 21:45:08
尹达任随州市代市长 胡志莉辞去市长职务

尹达任随州市代市长 胡志莉辞去市长职务

中国经济网
2026-11-04 10:15:05
黄某倩(女,22岁)在贺兰山独自翻越护栏,进入自然保护区后失联,3天后被发现在山崖下方,现场确认死亡,警方通报

黄某倩(女,22岁)在贺兰山独自翻越护栏,进入自然保护区后失联,3天后被发现在山崖下方,现场确认死亡,警方通报

南方都市报
2026-11-04 14:31:46
看房时老伯遗失绑有1500万元购房款的手机

看房时老伯遗失绑有1500万元购房款的手机

看看新闻Knews
2026-11-04 15:05:47
他是张国焘的助手,对毛泽东出言不逊,36岁被处决,后被追认烈士

他是张国焘的助手,对毛泽东出言不逊,36岁被处决,后被追认烈士

芬霏剧时光
2026-11-04 09:49:25
输掉参众两院,特朗普为战争付出惨重代价

输掉参众两院,特朗普为战争付出惨重代价

公评世界
2026-11-04 13:58:14
小伙背着尿素袋游览欧洲多个著名景点,意外走红,获全网超1000万浏览量:未来计划带尿素袋打卡更多国家

小伙背着尿素袋游览欧洲多个著名景点,意外走红,获全网超1000万浏览量:未来计划带尿素袋打卡更多国家

洪观新闻
2026-11-04 10:39:35
爆冷!共和党丢掉3个“铁票仓”,民主党横扫参众两院,特朗普成“跛脚鸭”总统!中期选举后美股怎么走?历史答案很清晰

爆冷!共和党丢掉3个“铁票仓”,民主党横扫参众两院,特朗普成“跛脚鸭”总统!中期选举后美股怎么走?历史答案很清晰

每日经济新闻
2026-11-04 21:04:26
我妈第一眼看到九寨沟打人那老头照片,她就说,这种人看着不好惹

我妈第一眼看到九寨沟打人那老头照片,她就说,这种人看着不好惹

皮蛋儿电影
2026-11-04 18:26:52
8岁女孩被同学以百米冲刺的速度撞至脑死亡!家长痛诉:事发1小时后孩子才被接上救护车,同学家长仅说过一句道歉,拿出1.7万元医药费后再无音信!

8岁女孩被同学以百米冲刺的速度撞至脑死亡!家长痛诉:事发1小时后孩子才被接上救护车,同学家长仅说过一句道歉,拿出1.7万元医药费后再无音信!

闪电新闻
2026-11-03 09:54:14
63岁苏州科技大学特聘教授陈建平逝世,主要从事机器学习等领域研究

63岁苏州科技大学特聘教授陈建平逝世,主要从事机器学习等领域研究

澎湃新闻
2026-11-04 17:26:28
杜特尔特亲信说出大实话:反华的菲律宾防长,把中国当作大号越南

杜特尔特亲信说出大实话:反华的菲律宾防长,把中国当作大号越南

军情观察家
2026-11-04 13:52:03
间谍已落网,穆杰塔巴召见军方高层,消息传进美国,伊朗开门见山

间谍已落网,穆杰塔巴召见军方高层,消息传进美国,伊朗开门见山

策前论
2026-11-03 13:26:49
2026-11-04 22:23:00
环球Tech incentive-icons
环球Tech
环球科技范儿,关注科技圈动态
54657文章数 65213关注度
往期回顾 全部

科技要闻

国行苹果AI上手实测:苦等两年,成色如何

头条要闻

美国中选民主党掀"蓝色浪潮" 共和党丢掉3个"铁票仓"

头条要闻

美国中选民主党掀"蓝色浪潮" 共和党丢掉3个"铁票仓"

体育要闻

老板豪言建队五年必夺冠 球员:保守了

娱乐要闻

甩掉周一围嫁富豪,童蕾今负债亿元,

财经要闻

苹果“躺赢”了英伟达

汽车要闻

省钱 它是认真的!银河星耀6EF每公里成本只要2毛

态度原创

健康
数码
教育
时尚
手机

痘痘长到25岁还没完?查查内分泌

数码要闻

三星Galaxy T1运动耳机获美国FCC认证,预计明年初发布

教育要闻

高中家长为什么都不关心考试了?

真爱大牌|| 爱了5年,终于等到他家破价

手机要闻

REDMI K100搭载小米WorldCast技术:一键生成3D运镜视频

无障碍浏览 进入关怀版