网易首页 > 网易号 > 正文 申请入驻

巴掌大超算中心跑200B大模型?技嘉桌面AI超算竞赛现场直击

0
分享至



7月26号下午,技嘉联合NVIDIA主办的“桌面AI超算竞赛”在京举行。这次活动核心玩法是利用技嘉AI TOP ATOM这台桌面AI超算平台,11队、30位开发者选手要在本地跑通推理、微调,产出能落地、可复现的解决方案,挖掘AI算力价值,最后现场演示答辩、由行业资深专家评审颁奖,整个竞赛精彩纷呈,气氛还挺燃,作为一位关注AI的数码博主,我有幸受邀观摩,在此和大家伙儿聊聊感受。

亮眼全场的桌面超算中心——技嘉AI TOP ATOM



进入会场,我一眼就锁定了参赛队伍们桌上用的小方盒——技嘉AI TOP ATOM。它比传统工作站小了不知道多少圈,但别被它呆萌的体积骗了,里面塞的是NVIDIA最新的GB10 Grace Blackwell超级芯片。



这颗芯片的20核ARM处理器和Blackwell架构GPU用NVLink-C2C技术,实现了共享128GB LPDDR5x统一内存池,带宽飙到273 GB/s。这意味着什么?CPU和GPU之间的通讯延迟大幅降低到传统PCIe5.0的1/5,FP16算力能干到31.25 TFLOPs,最惊人的是,技嘉ATOM整机功耗仅170瓦,远低于传统显卡或算力卡,ATOM这种能效比确实很让人服气了。

现场直击:200B本地大模型说跑就跑



活动现场最让我震撼的是,开发者们直接在现场用ATOM跑起了各种大模型,内存利用率达到100GB以上,甚至吃满128G内置统一内存,而且基于NVIDIA GB10 Grace Blackwell 超级芯片,ATOM的推理速度、吐字速度也快的惊人。更夸张的是,通过ConnectX网络互联,两台ATOM还能协同支持405B模型的推理,这性能直接把桌面超算的天花板往上抬了一大截。



另一大亮点是内置的趋境科技AIMA推理智能管控平台,搞过模型部署的兄弟们都懂:装驱动、搞依赖库挺耗费时间的,而AIMA内置AI Agent,能自动检测硬件、匹配最优配置、一键部署,开箱即用真不是吹的。而且它的核心功能100%离线可用——对于重视数据安全隐私的企业级场景来说,这简直是神器。而且系统还会自己跑基准测试、学习最优配置,越用越聪明,运维成本也被压到了极低。

桌面AI的民主化,从技嘉AI TOP ATOM开始



这次技嘉ATOM桌面AI超算竞赛让我感触最深的,是AI算力真正在走向民主化。以前跑大模型默认都得靠云端服务器或高价工作站,而现在一台巴掌大的设备就能轻松搞定本地AI大模型。无论个人开发者、高校师生、爱好者,都能轻松在本地离线跑模型做调校;而且它可以不依赖网络而离线使用、也无数据泄露风险,特别适配对隐私或数据安全要求很高的使用场景。



我觉得消费级桌面AI这场变革,技嘉用AI TOP ATOM这个小钢炮点起了一把火。轻量、高能效、低门槛,这才是未来AI该有的样子,这波我必须得给技嘉ATOM狠狠点赞。最后,我也希望未来能有更多的用户能用上这种AI超算平台,并做出更有价值的AI应用成果。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“葫芦娃爷爷”重新挂上7个葫芦,并自制提示牌提醒游客注意安全,游客:爷爷说有人从一千公里外专程赶来,怕大家看不到葫芦会失望

“葫芦娃爷爷”重新挂上7个葫芦,并自制提示牌提醒游客注意安全,游客:爷爷说有人从一千公里外专程赶来,怕大家看不到葫芦会失望

扬子晚报
2026-09-11 21:18:08
撞脸沈腾听劝卖炒饭走红!8元一份还计划巡炒

撞脸沈腾听劝卖炒饭走红!8元一份还计划巡炒

小椰的奶奶
2026-09-12 12:48:22
房价很大可能重走1998年老路!所有人一定要提前做好心理准备

房价很大可能重走1998年老路!所有人一定要提前做好心理准备

偷喝一口奶
2026-09-11 08:36:30
被摸臀女生完了!大佬支持男童,父亲反诉,女生国内外退路都没了

被摸臀女生完了!大佬支持男童,父亲反诉,女生国内外退路都没了

北纬的咖啡豆
2026-09-11 17:20:02
贾静雯比基尼私照疯传全网,竟是女儿偷偷爆料,51岁吊打一众小花

贾静雯比基尼私照疯传全网,竟是女儿偷偷爆料,51岁吊打一众小花

可乐谈情感
2026-09-11 13:52:44
知名港星癌细胞扩散至脑部,闻到身上有尸臭味,剩四分之一条人命

知名港星癌细胞扩散至脑部,闻到身上有尸臭味,剩四分之一条人命

叨唠
2026-03-15 17:36:49
万斯或将继任美总统,全球或迎来重大变局,最先受冲击的或是中国

万斯或将继任美总统,全球或迎来重大变局,最先受冲击的或是中国

无悔的灿烂人生
2026-09-11 19:28:36
耶伦带着50名经济学家,联手告了特朗普,征了中国的关税也得退?

耶伦带着50名经济学家,联手告了特朗普,征了中国的关税也得退?

施涛说
2026-09-11 16:51:56
小岛秀夫新作为何弃PlayStation转投Xbox?

小岛秀夫新作为何弃PlayStation转投Xbox?

灰度测试中
2026-09-11 11:08:24
杨紫琼与托德度假捕获巨型龙虾的留影

杨紫琼与托德度假捕获巨型龙虾的留影

娱你同欢
2026-08-04 19:41:35
爸把厂子给弟,我卖房车去德国,爸来电:你弟给你1900分红快谢他

爸把厂子给弟,我卖房车去德国,爸来电:你弟给你1900分红快谢他

阿凯销售场
2026-09-04 08:16:31
拉合尔倒计时:1965年,当全世界断定巴基斯坦必亡,北京按下另一块棋盘

拉合尔倒计时:1965年,当全世界断定巴基斯坦必亡,北京按下另一块棋盘

南冥那只猫
2026-08-28 23:02:15
“魔法画报”被指耽误急救,当事人致歉:与荣耀无关,老人用X70正常拨打求救电话;荣耀表示哀悼,不予追究

“魔法画报”被指耽误急救,当事人致歉:与荣耀无关,老人用X70正常拨打求救电话;荣耀表示哀悼,不予追究

界面新闻
2026-09-12 12:07:29
冠军赛激烈一夜!女单半决赛对决,陈幸同逆转取胜,陈熠激战韩莹

冠军赛激烈一夜!女单半决赛对决,陈幸同逆转取胜,陈熠激战韩莹

心如止水o
2026-09-11 23:19:13
刷墙绿化换不来乡村振兴,救不了乡村衰败的危机

刷墙绿化换不来乡村振兴,救不了乡村衰败的危机

涛哥锐评
2026-09-05 08:02:08
人狂有天收!曾叫嚣“随便就能瘫痪大陆”的柯文哲,如今自身难保

人狂有天收!曾叫嚣“随便就能瘫痪大陆”的柯文哲,如今自身难保

一路荒凉如歌a
2026-09-12 09:25:28
2026年出生人口预测:老百姓对断绝香火危机的冷漠,官方看到都无奈

2026年出生人口预测:老百姓对断绝香火危机的冷漠,官方看到都无奈

非虚构人间
2026-09-11 01:40:57
医生提醒:这3类食物才是血脂降不下来的“罪魁祸首”,你在吃吗

医生提醒:这3类食物才是血脂降不下来的“罪魁祸首”,你在吃吗

轩辕岛
2026-09-12 12:05:03
苹果新机涨价难挡消费者热情,iPhone 18 Pro系列预约量突破240万

苹果新机涨价难挡消费者热情,iPhone 18 Pro系列预约量突破240万

极目新闻
2026-09-10 19:32:38
75岁以后才明白:把父母接到自己家养老,是这世上最高代价的孝顺

75岁以后才明白:把父母接到自己家养老,是这世上最高代价的孝顺

游戏收藏指南
2026-08-09 01:09:42
2026-09-12 13:31:00
Timeow incentive-icons
Timeow
提猫,数码大玩家
512文章数 139关注度
往期回顾 全部

科技要闻

苹果折叠屏比小米华为贵5000元,该怎么选

头条要闻

媒体:女生被包办婚姻外逃 派出所凭啥把住址告知父母

头条要闻

媒体:女生被包办婚姻外逃 派出所凭啥把住址告知父母

体育要闻

老鹰真正的底气来自于什么?

娱乐要闻

港媒曝钟丽淇疑患渐冻症,本人发文

财经要闻

继房子茅台之后 中产的第"神话"也破灭了

汽车要闻

买菜车也有小乐趣 风云T7不止是台合格家用SUV

态度原创

旅游
教育
家居
游戏
艺术

旅游要闻

公厕关闭游客借用村民私厕被收费10元 景区通报

教育要闻

如果同学们都做对了,就给大家分糖吃

家居要闻

2026建博会(广州) 公装联探展交流活动

《最终幻想7:启示》总监称全光碟发售需牺牲终章品质

艺术要闻

211米!义乌第二高楼,封顶了

无障碍浏览 进入关怀版