网易首页 > 网易号 > 正文 申请入驻

微软新款Maia 300:167千瓦机架集成96颗芯片,token 效率提升40%

0
分享至

微软计划从 2027 年开始部署其自研 Maia 芯片,规模达数吉瓦。



微软计划摆脱对英伟达的依赖,于 2027 年部署其下一代 Maia 300 AI 加速器,目标是每兆瓦 token 数比领先的基于 GPU 的系统高出 40%。该芯片将为微软不断扩展的 AI 基础设施提供动力,其 96 个加速器的机架配置旨在实现高达前代 7 倍的 token 吞吐量。

这一发布标志着微软在构建用于大规模 AI 推理的定制芯片方面又迈出一步。其 Maia 200 加速器已经承担生产工作负载,包括 Microsoft Copilot。微软预计 GitHub Copilot 和 Microsoft Foundry 将在 2026 年底前采用该硬件。

Maia 300 采用系统级方法来提升推理效率。其架构面向内存密集型工作负载、长上下文推理,以及跨多步骤执行复杂任务的 AI 智能体。

内存带宽驱动设计

Maia 300 将八个 HBM4 内存堆栈与每秒 18 TB 的峰值带宽搭配。系统在 950 瓦热设计功耗范围内运行,以满足大型 AI 模型日益增长的内存需求。

微软还采用了多芯粒设计,将计算、内存控制器和输入/输出功能分离。计算芯粒采用台积电的 N2P 制造工艺,旨在提升每瓦性能。

该加速器还支持增强的 MXFP4 低精度计算。这种方法降低了模型计算和键值缓存存储的内存需求。这些节省可帮助系统在相同功耗预算内支持更长的上下文窗口并服务更多请求。

软件在该设计中发挥重要作用。微软的软件定义数据流架构旨在让数据靠近计算资源,减少不必要的传输。AI 辅助的内核优化也有助于提高不同工作负载下的硬件利用率。

网络连接 96 个加速器

Maia 300 将其架构从单个芯片扩展到整个机架。每种配置在 167 千瓦功耗范围内组合 96 个加速器。

微软列出该机架高速纵向扩展域内总计 27.6 TB 的 HBM 容量和每秒 1.7 PB 的聚合内存带宽。这一组合面向更大的推理工作负载,以及单次部署内更多同时进行的 AI 交互。

定制网络通过针对张量并行优化的高带宽链路连接加速器。一个面向 AI 的传输层使用基于以太网的基础设施,支持跨加速器和跨机架的通信。该设计旨在扩展工作负载,而不把网络视为单独的瓶颈。

微软表示,Maia 300 每兆瓦应能提供比领先的基于 GPU 的系统多 40% 的 token。其预计的机架级吞吐量也比 Maia 200 大幅提升,不过该公司尚未详细说明这些比较所依据的独立基准测试。

Maia 200 扩大生产

微软已在美国、欧洲和澳大利亚部署 Maia 200。该公司报告称,与领先的 GPU 基础设施相比,Teams、Copilot 和 Cowork 体验中的内置 AI 功能每瓦 token 数最高可达到后者的 1.7 倍。

现有加速器运行 OpenAI 模型、微软的 MAI 模型以及开源模型系列。微软利用这些服务的性能数据来指导硬件开发并优化真实工作负载。

Maia 300 将支持微软的模型开发工作、云端推理和基于智能体的编码工具。微软还预计该硬件将帮助扩展其临床 AI 助手 Dragon Copilot。

生产部署将于 2027 年开始。微软的长期计划要求从当年开始进行数吉瓦级的 Maia 部署,将定制芯片定位为其不断扩展的 AI 计算能力的重要组成部分。

如果朋友们喜欢,敬请关注“知新了了”!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
高盛发出预警:人民币被低估20-25%,中国房产将迎来全球资本围猎

高盛发出预警:人民币被低估20-25%,中国房产将迎来全球资本围猎

冰语历史
2026-10-21 18:36:11
车毁人亡,杆子轻伤

车毁人亡,杆子轻伤

历史总在押韵
2026-10-21 23:35:02
油价最新调整通知!

油价最新调整通知!

新浪财经
2026-10-20 11:57:26
又掀桌子!30吨载重的第二架原型机现身,中国有了自己的大力神

又掀桌子!30吨载重的第二架原型机现身,中国有了自己的大力神

淡然小司
2026-10-22 07:09:17
A股:午后突加速跳水破3650,种种迹象表明,A股熊市已宣告开始了吗?

A股:午后突加速跳水破3650,种种迹象表明,A股熊市已宣告开始了吗?

趋势小诸葛
2026-10-22 14:34:47
英媒:选举浪潮或重塑欧盟政治版图

英媒:选举浪潮或重塑欧盟政治版图

参考消息
2026-10-21 15:23:26
王石又医美?脸无皱纹被吐槽馒化姨化,为讨好妻子,还是不自信?

王石又医美?脸无皱纹被吐槽馒化姨化,为讨好妻子,还是不自信?

星闻杂谈记
2026-10-20 10:53:28
12中12+10次扣篮!东契奇一场喂饼,喂到破纪录!

12中12+10次扣篮!东契奇一场喂饼,喂到破纪录!

体育新角度
2026-10-22 16:15:11
1980年,邓小平说:毛主席的错误,要毫不含糊地批评,但要实事求是

1980年,邓小平说:毛主席的错误,要毫不含糊地批评,但要实事求是

帝哥说史
2026-10-11 16:14:43
女人高潮后为什么还可能继续想要?不是“没满足”,而是女性身体和男人不太一样

女人高潮后为什么还可能继续想要?不是“没满足”,而是女性身体和男人不太一样

说点事
2026-10-22 14:21:15
乒乓亚锦赛! 男团4强诞生,日本苦战3-2逆转,林诗栋3-1,向鹏3-0

乒乓亚锦赛! 男团4强诞生,日本苦战3-2逆转,林诗栋3-1,向鹏3-0

南海浪花
2026-10-22 04:55:30
大家有没有发现?油车加200元油,大致能跑400公里,新能源电车花200元电费,可能能跑2000公里。用车成本差这么大,为什么仍有人买油车?

大家有没有发现?油车加200元油,大致能跑400公里,新能源电车花200元电费,可能能跑2000公里。用车成本差这么大,为什么仍有人买油车?

扶苏聊历史
2026-09-22 16:09:20
人社局:正高级职称补贴30万,副高级20万,中级6万

人社局:正高级职称补贴30万,副高级20万,中级6万

新浪财经
2026-10-19 22:35:08
C罗1000球指日可待!菲利克斯再一次成全了C罗!

C罗1000球指日可待!菲利克斯再一次成全了C罗!

低调看天下
2026-10-21 16:33:07
iPhone Duo提前到手!林俊杰亲测实机「只脱口一个字」被拍真实反应

iPhone Duo提前到手!林俊杰亲测实机「只脱口一个字」被拍真实反应

ETtoday星光云
2026-10-22 13:35:18
发现件有意思的事:全红婵才19岁,竟已拥有三个独立个人代言

发现件有意思的事:全红婵才19岁,竟已拥有三个独立个人代言

草莓解说体育
2026-10-22 07:33:26
罗翔:千万不要在家闲着,即使没工作、没事干,也千万别躺平,因为人一旦躺下,一晃一天就过去了,没收入还躺出一身病,心情也...

罗翔:千万不要在家闲着,即使没工作、没事干,也千万别躺平,因为人一旦躺下,一晃一天就过去了,没收入还躺出一身病,心情也...

犀利辣椒
2026-10-15 06:22:38
戴了30天三星Galaxy Watch9,我承认自己需要被盯着

戴了30天三星Galaxy Watch9,我承认自己需要被盯着

晚风寄温柔
2026-10-21 15:09:22
中国第五人!杨瀚森用44场解锁生涯100分,王治郅用了22场,那姚明和易建联呢?

中国第五人!杨瀚森用44场解锁生涯100分,王治郅用了22场,那姚明和易建联呢?

麦子的篮球故事
2026-10-22 13:53:46
乒乓亚锦赛:国乒女团3-0横扫韩国进决赛!将与日本队争夺冠军

乒乓亚锦赛:国乒女团3-0横扫韩国进决赛!将与日本队争夺冠军

全言作品
2026-10-22 15:19:56
2026-10-22 16:52:49
知新了了
知新了了
专注于新知、科普的传播
6707文章数 2298关注度
往期回顾 全部

科技要闻

腾讯云谷歌紧急行动!互联网安全出大事

头条要闻

媒体:日本防卫省批准了47项"研究课题" 这事不简单

头条要闻

媒体:日本防卫省批准了47项"研究课题" 这事不简单

体育要闻

热闹的NBA回来了,他却倒在新赛季大门口

娱乐要闻

芭莎盛典,张小斐因救场实现口碑暴涨

财经要闻

数据中心建设延期潮 谁受伤、谁受益?

汽车要闻

有七座/续航提升 领克900L曝光还可选双色车身+大饼轮毂

态度原创

亲子
艺术
本地
健康
家居

亲子要闻

梦想和现实

艺术要闻

2026 嘉德艺术周|万珍荟萃,汇览东西,邀您一站解锁古今艺术之旅

本地新闻

一场垂直登高赛跑出了"山城"的真正内核

痘痘能根治吗?皮肤科医生说实话

家居要闻

2026建博会(广州) 公装联探展交流活动

无障碍浏览 进入关怀版