网易首页 > 网易号 > 正文 申请入驻

首发计算运维智能体,华为CCAE为万卡集群点灯

0
分享至

一座城市的规模,决定了它需要什么样的守夜方式。

小城镇的夜里,一个打更人提着灯笼走一遍街巷,遇到什么处理什么,靠的是脚力和经验。等这座镇子长成了大都市,街道从几条变成几千条,人口从几百变成几百万,一个打更人就算跑断了腿,也巡不完一个零头。他得有地图、路灯,最好还能有人帮他把该处理的麻烦先处理掉。

算力集群正在经历这样的膨胀。而这座城市的守夜人——运维团队,正面临着前所未有的压力。

过去三年,万卡规模的AI训练集群还是行业天花板,今天万卡已经不是新闻。一个万亿参数的大模型需要数万张加速卡,模型参数再往上走,算力需求跨入十万卡量级,光模块数量突破百万,相当于一座中等城市所有路灯的总数,要做到每一盏都实时可控、故障秒级响应。



旧的守夜方式走到了头,新的方式正在敲门。今年9月,华为全联接大会发布了业界首个计算运维智能体算小维,集群数字地图同步升级到2.0。

这套组合拳要回答的,正是那个越来越紧迫的问题:万卡之城,到底该怎么守夜?



2024年初,中国一天消耗的token大约是1000亿。到2026年,这个数字变成了140万亿。两年,一千倍。

中国信通院的数据显示,截至2026年6月底,我国智能算力规模已达2185EFLOPS。同时,投运的标准机架超过1373万架,已建成42个万卡级智算集群。

只看这条曲线,你会以为这是一个关于“更多”的故事:更多的卡、更多的机架、更多的电。但只要把镜头从曲线拉回机房,规模膨胀带来的直接挑战是运维复杂度的指数级上升。

算力不是跑起来就行,真正的挑战是算力利用率和可靠性。一座集群建成投运,只是算力价值的起点。它能不能持续输出、能不能稳定输出、能不能高效输出,才是决定这笔投资回报的关键。

不过,当集群规模从千卡迈向万卡,运维的难度也指数级翻倍。一个1024卡的超节点会生成8万多个数字对象,对应千万级监控指标。打更人的灯笼照得再勤,也照不全这座城的每一个角落。

并且,有些“火情”不是靠肉眼能看见的。光模块脏污松动、器件老化等隐性问题不会直接报警,却可能在训练任务跑到关键节点时突然发作。

同时,业务侧对算力基础设施的可靠性要求达到了前所未有的高度。金融推理场景,千卡集群的服务可靠性需要达到99.95%,意味着全年可控业务中断时长不能超过4.4小时;万卡训练场景里,集群每停一天,就是数百万乃至上千万的算力成本蒸发。守夜人打一个盹,代价可能是整座城市停摆。

告警看不完、隐患看不见、故障等不起……产业发展到这一步,靠人巡夜的时代显然已经翻篇了。新守夜人该长什么样?



万卡之城需要怎样的守夜人?

我们或许能从华为CCAE最新成果计算运维智能体算小维一窥究竟。

而要理解智能体对运维意味着什么,不妨先回顾一下计算运维的演进脉络。

最早的运维是人肉时代,工程师登录服务器,逐条命令排查。随后进入自动化时代,监控、告警、脚本批量执行,工具链不断完善,但决策依然依赖人。而智能体的出现就是为了解放人工巡检。

简单来说,智能体是具备感知、决策、执行能力的智能运维工程师。华为CCAE计算运维智能体算小维有两个核心能力。第一是故障诊断,沉淀了1400多种故障模式,依托华为CCAE在全球海量运维场景中持续积累和迭代。第二层是智慧节能,系统可实时感知整机设备运行状态、业务负载潮汐与空闲时段,通过动态调频、智能负载调度、硬件精细化降频等策略,在不影响AI训推业务性能的前提下,实现集群空闲态能耗降低10%。



以故障分析为例,在算力集群的故障排行榜上,光链路脏污长期占据榜首。万卡集群里,一根光链路闪断,可能引发连锁反应:同一链路在3秒内上报3条LINK DOWN,再加上30条IPv6链路状态改变等衍生告警。传统模式下,运维人员需要逐条查告警、查性能、查连接,在6个页面之间来回切换,大约需要1小时才能判断出是光模块收光功率异常和链路劣化,而且准确率只有70%左右。

而智能体算小维接手后,这一过程被压缩到分钟级,准确率也大幅提升,它不再需要人在告警海洋里“捞针”,而是直接给出根因判断和修复建议。

这种能力的背后是华为CCAE在数据与经验上的长期积累。具体来看,华为CCAE首发的计算运维智能体,对各代际新设备同步建模,逆向从7000多个现网真实故障案例中总结规律,形成故障分类诊断Skills的专业know-how。不同skills按照类别划分,按照类别覆盖场景,覆盖率可以达到95%以上。

从人转移到工具,再从工具转移到智能体……万卡之城的守夜人从一群熬红了眼的工程师变成一套能感知、能思考、能行动的智能系统。技术最大程度地解放了人,但只有巡逻的智能体,真的能为万卡集群保驾护航吗?



万卡集群之所以难以维护,不仅在于数量多,更在于链路复杂、故障传播快、根因藏得深。

一个万卡规模的集群内部交织着数万条高速链路、数十万个光模块、成千上万个交换节点。一个光模块的收光功率轻微劣化就会引发链路闪断、RDMA重传等连锁反应。守夜人需要一张足够精细、足够实时、足够可交互的“底图”来支撑。

华为CCAE同步升级的集群数字地图2.0要解决的就是这个问题。

它的本质是将物理集群一比一映射为运维系统内的逻辑对象。大到数万卡规模的集群对象,小到单颗NPU的UDIE端口,全部完成数字化建模。



同时,集群所有连接也完成了建模,NPU/CPU等计算单元通过灵衢总线互联,互联包括POD内的电互联和POD间的光互联。这意味着,每一颗芯片的实时状态都会被监控,哪个器件、哪条链路异常,在数字地图上就可以快速定位。

这就像给一座城市画了一张实时更新的巡检地图。以前运维人员面对的是一排排机柜、一根根线缆,只能靠经验和运气去判断哪里出了问题。现在,每一盏路灯都有了坐标,每一条线路都有了标签,运维人员拥有了全局的、实时的、可交互的视野。

进一步看,数字地图和智能体算小维之间形成了一种眼睛与大脑的配合关系:数字地图负责“看见”,把物理世界的复杂状态翻译成数字世界可计算、可推理的结构化信息;智能体算小维负责判断,在这张地图上做根因分析、做决策、做执行。

没有地图,智能体就是盲人摸象;没有智能体,地图就只是一张好看的静态图纸。两者结合,才让万卡之城的守夜从人海战术真正走向系统化的智能运维。

但是,这张地图将会供谁使用?它照亮的是一座算力小镇还是千家万户的算力城池?



一座城的安全,不能只靠一个守夜人。

华为CCAE计算运维智能体算小维的意义不仅在于交出了一份技术答卷,更在于划出了一条产业分界线。在此之前,智能运维是单点工具的比拼。算小维发布之后,竞争将走向体系化能力和生态格局。而服务的集群越多,见过的故障越丰富,智能体就越智能。

换句话说,运维就像算力价值的放大器。同样的卡,同样的电,运维水平差一个档次,产出可能差出一大截。一次非计划停机带来的损失,可能远超一年的运维投入;而一次成功的隐患预判,省下的可能是整批训练任务的宝贵时间。

从芯片到集群、从硬件到软件的全栈运维经验,加上每年在集群自智引擎上超过亿元的研发投入,华为CCAE搭建了一道很难被短期复制的护城河。

经过全球海量复杂场景实战验证,华为CCAE目前已服务全球超350个AI集群,万卡级AI训练集群可用度达98.5%。可用度从98%提升到98.5%看起来只是0.5个百分点,对于一个年产值数亿的集群来说却意味着数百万的增量收益。

不过,华为CCAE并没有选择把这些能力攥在手里。在计算管理软件分论坛《集群运维智能体,智启运维新时代》上,华为计算管理软件产品线总裁鲁驰提出,明年将逐步参与行业标准建设。智能运维还处在早期,行业缺乏统一的技术规范和评估体系。标准的建立意味着产业从各自为战走向协同进化,最终受益的是整个算力生态。

回过头看,守夜的方式一直在变。小城镇的夜靠一个打更人的脚力和经验;大都市的夜靠地图、路灯和一套自动运转的巡夜系统。万卡之城的守夜人则正在从人变成一群智能体,靠的是一整套能被复制、被共享、被共建的守夜体系。

华为CCAE升级后,数字地图把城照亮,智能体替人巡夜,技能库把经验传下去,开放生态让更多城能跟着亮起来。



一盏灯照着一条街,万盏灯亮着一座城。当所有的城都亮起来的时候,才算真正走进了智能运维的时代。

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
厦门偶遇林丹,买下游艇与朋友聚会,游艇上还印有一家三口名字

厦门偶遇林丹,买下游艇与朋友聚会,游艇上还印有一家三口名字

柒佰娱
2026-10-29 09:47:19
张红梅任贵阳市副市长

张红梅任贵阳市副市长

上观新闻
2026-10-29 09:51:47
原来,在境内揭露电诈也是会没命的

原来,在境内揭露电诈也是会没命的

不主流讲话
2026-10-27 22:42:03
刚刚,加息25个基点!这国央行,突然宣布

刚刚,加息25个基点!这国央行,突然宣布

证券时报
2026-10-28 23:19:06
张雨绮的“雪莉杨”换人了!《鬼吹灯》收官作官宣张钧甯接棒,潘粤明姜超回归

张雨绮的“雪莉杨”换人了!《鬼吹灯》收官作官宣张钧甯接棒,潘粤明姜超回归

娱乐嗑学家.
2026-10-29 09:12:55
法国权威媒体:中国有1亿皇马球迷,皇马被迫道歉是因为怕没钱赚

法国权威媒体:中国有1亿皇马球迷,皇马被迫道歉是因为怕没钱赚

风过乡
2026-10-29 07:45:26
大儿子借3万救命钱父母不给,却转身给小儿子买了20万的车

大儿子借3万救命钱父母不给,却转身给小儿子买了20万的车

泽泽先生
2025-05-07 18:11:52
1980年,邓小平说:毛主席的错误,要毫不含糊地批评,但要实事求是

1980年,邓小平说:毛主席的错误,要毫不含糊地批评,但要实事求是

帝哥说史
2026-10-11 16:14:43
C罗再度赢得金球奖!

C罗再度赢得金球奖!

五星体育
2026-10-29 10:04:42
AI能让全人类提前过上退休生活,但前提是改变分配制度

AI能让全人类提前过上退休生活,但前提是改变分配制度

修明札记
2026-10-29 10:10:53
就业噩梦才刚开始:今年是未来十年就业最轻松的一年

就业噩梦才刚开始:今年是未来十年就业最轻松的一年

黑噪音
2026-10-28 21:15:24
26岁独居女子凌晨被男子约出门后失联约一周,事发福建闽侯,多方回应

26岁独居女子凌晨被男子约出门后失联约一周,事发福建闽侯,多方回应

新京报
2026-10-29 09:39:26
创历史,日本球员首次在一场德国职业比赛中合计打进4球

创历史,日本球员首次在一场德国职业比赛中合计打进4球

懂球帝
2026-10-29 04:23:44
男子价值500多万元限量版阿斯顿马丁被撞,肇事网约车全责,司机无奈:无商业险,只能分期赔付;平台:愿意承担最低20%至全额责任

男子价值500多万元限量版阿斯顿马丁被撞,肇事网约车全责,司机无奈:无商业险,只能分期赔付;平台:愿意承担最低20%至全额责任

海峡网
2026-10-28 16:26:07
孙俪晒出家常晚餐,全网沉默了。你敢信吗?孙俪家的晚饭就是桌上这几盘菜,有人说明星这是作秀,有人说这才是真会过日子。

孙俪晒出家常晚餐,全网沉默了。你敢信吗?孙俪家的晚饭就是桌上这几盘菜,有人说明星这是作秀,有人说这才是真会过日子。

LULU生活家
2026-10-27 17:44:26
乌干达军方宣布“食人魔”落网,男子涉嫌15年杀害并吃掉38人,曾多次被捕后逃脱或被释放

乌干达军方宣布“食人魔”落网,男子涉嫌15年杀害并吃掉38人,曾多次被捕后逃脱或被释放

扬子晚报
2026-10-29 10:37:18
你有没有发现,当年中国入世谈判花了15年,如今为啥WTO几乎被国人忘记了

你有没有发现,当年中国入世谈判花了15年,如今为啥WTO几乎被国人忘记了

怪味历史连连看
2026-09-08 10:25:12
外媒:以色列对伊拉克境内两座武器库发动袭击,里面存放着大量中国防空系统

外媒:以色列对伊拉克境内两座武器库发动袭击,里面存放着大量中国防空系统

零度Military
2026-10-27 16:25:21
搜狐市值只剩3.5亿美元,可公司账上却有12亿现金,张朝阳宁可错过短视频等风口,也不多花每一分钱

搜狐市值只剩3.5亿美元,可公司账上却有12亿现金,张朝阳宁可错过短视频等风口,也不多花每一分钱

新浪财经
2026-10-13 21:44:48
义乌袜业大王破产18年,儿子在国外来电:爸,巴黎的房子还要吗?

义乌袜业大王破产18年,儿子在国外来电:爸,巴黎的房子还要吗?

七分瘦三分肥
2025-06-11 22:23:44
2026-10-29 11:12:49
脑极体 incentive-icons
脑极体
从智能密钥到已知尽头
3842文章数 167637关注度
往期回顾 全部

科技要闻

MacBook终于能触屏了:22999元起

头条要闻

牛弹琴:西班牙高铁事故以荒诞方式发生 让人后背发凉

头条要闻

牛弹琴:西班牙高铁事故以荒诞方式发生 让人后背发凉

体育要闻

湖人只有一个卢卡·开拓者的四大金刚

娱乐要闻

李嘉格自曝离婚内情:过错方净身出户

财经要闻

“对不起,我们不投具身智能了”

汽车要闻

首销期权益价23.98万起 2026款理想i6上市

态度原创

时尚
教育
手机
家居
亲子

柔情万种的针织裙,开叉的更显瘦!

教育要闻

最新报告显示:美国人文学博士论文十年锐减49%!留学生赴美读博该如何选择?

手机要闻

1TB塞进口袋!三星T7/T9存储卡让旅拍不删片

家居要闻

2026建博会(广州) 公装联探展交流活动

亲子要闻

我们家西蒙,从小就主打一个反套路…

无障碍浏览 进入关怀版