网易首页 > 网易号 > 正文 申请入驻

国货之光!全球AI存储基准测试MLPerf Storage 3.0结果发布,斩获九项第一

0
分享至



三节点EC硬件配置覆盖多类训练与Checkpoint负载,兼顾性能与硬件成本效率。

9月1日,MLCommons正式发布MLPerf® Storage Benchmark 3.0(简称MLPerf Storage)基准测试结果。XSKY星辰天合旗下MeshFS首次参赛,在并行文件存储赛道获得九项第一

MLPerf Storage是由MLCommons组织的全球AI存储基准测试,用于验证存储系统对训练数据读取和模型状态读写的支撑能力。3.0版本覆盖Unet3D大文件训练、RetinaNet海量小文件训练,以及Llama3 8B至405B Checkpoint读写。三项负载具有不同的I/O形态,可从多个维度衡量存储系统性能。

本届测试共有来自全球的19家厂商、23款产品参评,其中并行文件系统赛道有14家厂商参与,包括Pure Storage、WEKA、浪潮存储、Alluxio等国内外厂商,相关结果可为AI存储选型提供参考。

MeshFS是XSKY设计的高性能并行文件系统,面向AI大模型训练、推理及高性能大规模数据处理场景。据XSKY公开资料,MeshFS采用其自研的Shared-Everything全闪存架构,利用NVMe与RDMA硬件能力,产品指标包括微秒级I/O延迟和TB/s级聚合带宽。

1.九项第一:多项性能与硬件成本效率指标居首


XSKY MeshFS获得的九项第一分布在小文件训练吞吐、Unet3D、RetinaNet与405B Checkpoint等测试项,涉及每客户端读带宽、训练场景单位性能成本和容量效率等指标。结果显示,MeshFS可支撑多训练客户端并发访问,并在三节点硬件配置下提供较高训练带宽;Checkpoint读写性能也有助于缩短模型状态保存与故障恢复时间。


图:XSKY MeshFS九项第一总览


2.三节点EC配置,覆盖全部参测场景

从Training到Checkpoint,存储端在全部测试中使用同一套三节点硬件配置。

每个存储节点配置双路英特尔®至强®6530P处理器、512GB内存和4个200*2 Gb/s ConnectX-7网卡。6530P属于搭载P-core(性能核)的英特尔® 至强®6处理器家族。三节点共使用48块7.68 TB忆联UH812a TLC SSD;集群采用EC 4+2:1数据保护,可提供223.5 TiB受保护可用容量。

客户端共配置9台节点,通过POSIX客户端和RDMA网络访问存储。


图:XSKY MeshFS测试环境


3.三类负载实测:大文件、小文件与Checkpoint

此次XSKY MeshFS参与的三类负载对应不同的I/O压力。Unet3D侧重大文件连续读取,RetinaNet考察海量小文件并发和元数据处理能力,Llama3 405B Checkpoint则要求存储同时承受大模型状态的高强度读写。同一套系统支撑三类负载,可同时检验单一负载性能以及不同I/O路径的处理能力。

Unet3D·大文件训练读取 双项第一

Unet3D在MLPerf Storage中主要考察存储持续满足训练端大文件读取需求的能力。测试结果显示,XSKY MeshFS每客户端带宽为67.73 GiB/s,位列第一;每GiB/s硬件成本为1,053美元,同样位列第一,两项指标均居首位。

RetinaNet·海量小文件训练 三项第一

海量小文件场景对存储系统的元数据处理与小I/O能力要求较高。RetinaNet包含7540万个、平均约315 KiB的小文件,高并发访问会同时对元数据处理与小I/O通路形成压力。测试模拟675个B200训练I/O负载,XSKY MeshFS训练吞吐为96.13 GiB/s,每客户端带宽为10.68 GiB/s,每GiB/s硬件成本为4,163美元,三项指标均位列第一。


图:RetinaNet训练吞吐与效率


Llama3 405B·Checkpoint读写 双项第一

大模型训练中,Checkpoint直接影响训练连续性与容错能力,既需要定期写入保存状态,也需要在故障恢复时快速读回。Llama3 405B单次检查点文件大小为5292 GB,对存储双向读写能力提出较高要求。结果显示,XSKY MeshFS读取每客户端带宽为47.49 GiB/s,位列第一;每GiB/s硬件成本为1,053美元,同样位列第一;Checkpoint写入时每客户端带宽为13.34 GiB/s,可为大模型检查点保存与恢复提供支持。

4.不同参测方案的硬件成本评估

在高性能存储测试中,不同厂商采用的硬件方案差异较大,仅比较单一性能数值存在一定局限。除性能外,硬件投入与成本效率也是实际选型中的重要考量。

根据2026年Q3硬件渠道价格参考进行测算,对参与测试的并行文件系统方案进行了硬件成本量化。其中排除1个双品牌重复提交方案,以及2个存储侧配置无法核实的方案。测算结果如下:


图:各参测方案的硬件投入情况


从图中可以看到,不同参测方案的硬件成本存在较大差异,部分方案的DRAM成本占比较高,可能与将内存用于写缓存的配置有关。基于此测算范围,XSKY MeshFS使用同一套三节点硬件配置完成全部场景测试,并在硬件成本效率指标上处于领先位置。

5.MeshFS,国产AI存储的新名片

在全球AI存储基准测试MLPerf Storage 3.0中拿下九项第一,意味着XSKY MeshFS的价值不只体现在单项性能数字上。以一套三节点配置完成大文件读取、海量小文件并发和大模型Checkpoint读写等多类负载,并兼顾性能与硬件成本效率,展现了国产AI存储在复杂训练场景中的竞争力。随着国内AI基础设施建设加速,XSKY MeshFS正在成为国产高性能并行文件系统中一张值得关注的新名片。

参考资料:

•MLPerf Storage Benchmark Suite Results:https://mlcommons.org/2026/09/mlperf-storage-v3-0-results/

(封面图来源:AI生成)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
印度专家谈到中国时满脸不可置信:中国竟有50多个城市有地铁!

印度专家谈到中国时满脸不可置信:中国竟有50多个城市有地铁!

奇葩游戏酱
2026-09-09 07:06:57
55岁演员王新昉猝死,生前私生活曝光,两不良习惯或成“催命符”

55岁演员王新昉猝死,生前私生活曝光,两不良习惯或成“催命符”

离离言几许
2026-09-11 10:36:33
明明是一个4岁男孩被恶女人欺负,为什么全网都在讨论那个莫须有的“性骚扰”?

明明是一个4岁男孩被恶女人欺负,为什么全网都在讨论那个莫须有的“性骚扰”?

从前这些事
2026-09-09 18:51:11
普林斯顿大学教授王梦迪:大模型在数学和编程上的成功目前还无法延伸至科学发现

普林斯顿大学教授王梦迪:大模型在数学和编程上的成功目前还无法延伸至科学发现

澎湃新闻
2026-09-10 14:36:02
前国青主帅呼吁姚迪回归!直言进军奥运剩50%机会,赵勇主动揽责

前国青主帅呼吁姚迪回归!直言进军奥运剩50%机会,赵勇主动揽责

排球黄金眼
2026-09-11 09:17:54
他主政合肥,一片麦田上建起经开区,直言要开放开发,再造新合肥

他主政合肥,一片麦田上建起经开区,直言要开放开发,再造新合肥

利刃说史
2026-09-09 20:28:00
她是谢富治的妻子,官至正部级,被开除党籍,子女过得怎么样

她是谢富治的妻子,官至正部级,被开除党籍,子女过得怎么样

混沌录
2025-03-28 17:16:10
刚拿冠军就退役,当晚直接打包行李走人,这姑娘的操作把全网看傻

刚拿冠军就退役,当晚直接打包行李走人,这姑娘的操作把全网看傻

静若梨花
2026-08-29 10:42:55
“眼神都拉丝了!”家长晒母子互动视频,引全网不适:儿大不避母的结果

“眼神都拉丝了!”家长晒母子互动视频,引全网不适:儿大不避母的结果

妍妍教育日记
2026-08-31 23:54:51
刘翔08年曾退赛!媒体人:当年只有他顶雷,说他愚弄观众又蠢又坏

刘翔08年曾退赛!媒体人:当年只有他顶雷,说他愚弄观众又蠢又坏

奥拜尔
2026-09-10 14:15:03
3-0横扫晋级!中国女乒29岁王牌闪耀:孙颖莎王曼昱缺席,她扛旗冲冠

3-0横扫晋级!中国女乒29岁王牌闪耀:孙颖莎王曼昱缺席,她扛旗冲冠

李喜林篮球绝杀
2026-09-10 14:02:07
86岁奶奶坚持举铁:肌肉,才是晚年最大底气!5个居家动作照着练就行

86岁奶奶坚持举铁:肌肉,才是晚年最大底气!5个居家动作照着练就行

人民日报健康客户端
2026-09-09 07:35:58
破镜重圆复婚在即 张柏芝亲自证实 三个儿子都已经被谢霆锋接走

破镜重圆复婚在即 张柏芝亲自证实 三个儿子都已经被谢霆锋接走

星辰生肖馆
2025-03-22 05:10:03
女学生逼人资助反转!官媒质疑是剧本,当地介入彻查,果然有猫腻

女学生逼人资助反转!官媒质疑是剧本,当地介入彻查,果然有猫腻

番外行
2026-09-10 14:42:37
铜价,直线跳水

铜价,直线跳水

上海证券报
2026-09-10 22:13:09
4岁男童被指“摸臀”,律师:法律上不构成性骚扰

4岁男童被指“摸臀”,律师:法律上不构成性骚扰

野生运营
2026-09-10 05:18:20
卢伟真走运,怀特塞德的罚单迟到65天才来,上海总冠军保住了

卢伟真走运,怀特塞德的罚单迟到65天才来,上海总冠军保住了

秋姐居
2026-09-10 19:16:44
苹果iPhone 18 Pro跑分曝光 多核不敌玄戒O3

苹果iPhone 18 Pro跑分曝光 多核不敌玄戒O3

PChome电脑之家
2026-09-11 09:56:49
1935年红军成功拿下腊子口,偶然发现一处仓库,当将士们踏入仓库内部,眼前的景象让全军将士纷纷落泪

1935年红军成功拿下腊子口,偶然发现一处仓库,当将士们踏入仓库内部,眼前的景象让全军将士纷纷落泪

磊子讲史
2026-09-08 17:30:43
女篮世界杯一夜三大惨案!美国52分狂胜中国输29分:东道主大爆冷

女篮世界杯一夜三大惨案!美国52分狂胜中国输29分:东道主大爆冷

篮球快餐车
2026-09-11 05:03:45
2026-09-11 11:24:49
甲子光年
甲子光年
中国科技产业化前沿智库
3606文章数 9296关注度
往期回顾 全部

科技要闻

罗永浩连用7个“抄的”吐槽苹果折叠屏

头条要闻

牛弹琴:玩危险游戏 阿联酋快把阿拉伯兄弟们得罪光了

头条要闻

牛弹琴:玩危险游戏 阿联酋快把阿拉伯兄弟们得罪光了

体育要闻

16岁的国产小库里,还有多少功课要做

娱乐要闻

17岁拿下世界第一,还被亲妈吐槽?

财经要闻

向松祚:年轻人不必过早买房

汽车要闻

方程S系列9月16日上市 配磁流变悬架和闪充技术

态度原创

数码
旅游
亲子
手机
艺术

数码要闻

三星Galaxy Buds On渲染图曝光:耳夹式开放耳机

旅游要闻

水上乐园整体方案设计选哪家?先看行业趋势再看厂商

亲子要闻

咸宁市交通实验幼儿园开展师德师风专题教育 重温育人初心 践行师者担当

手机要闻

苹果iOS 27升级VoiceOver辅助功能:图像描述更丰富

艺术要闻

22位中国当代画家的人物油画作品

无障碍浏览 进入关怀版