网易首页 > 网易号 > 正文 申请入驻

巴掌大超算中心跑200B大模型?技嘉桌面AI超算竞赛现场直击

0
分享至



7月26号下午,技嘉联合NVIDIA主办的“桌面AI超算竞赛”在京举行。这次活动核心玩法是利用技嘉AI TOP ATOM这台桌面AI超算平台,11队、30位开发者选手要在本地跑通推理、微调,产出能落地、可复现的解决方案,挖掘AI算力价值,最后现场演示答辩、由行业资深专家评审颁奖,整个竞赛精彩纷呈,气氛还挺燃,作为一位关注AI的数码博主,我有幸受邀观摩,在此和大家伙儿聊聊感受。

亮眼全场的桌面超算中心——技嘉AI TOP ATOM



进入会场,我一眼就锁定了参赛队伍们桌上用的小方盒——技嘉AI TOP ATOM。它比传统工作站小了不知道多少圈,但别被它呆萌的体积骗了,里面塞的是NVIDIA最新的GB10 Grace Blackwell超级芯片。



这颗芯片的20核ARM处理器和Blackwell架构GPU用NVLink-C2C技术,实现了共享128GB LPDDR5x统一内存池,带宽飙到273 GB/s。这意味着什么?CPU和GPU之间的通讯延迟大幅降低到传统PCIe5.0的1/5,FP16算力能干到31.25 TFLOPs,最惊人的是,技嘉ATOM整机功耗仅170瓦,远低于传统显卡或算力卡,ATOM这种能效比确实很让人服气了。

现场直击:200B本地大模型说跑就跑



活动现场最让我震撼的是,开发者们直接在现场用ATOM跑起了各种大模型,内存利用率达到100GB以上,甚至吃满128G内置统一内存,而且基于NVIDIA GB10 Grace Blackwell 超级芯片,ATOM的推理速度、吐字速度也快的惊人。更夸张的是,通过ConnectX网络互联,两台ATOM还能协同支持405B模型的推理,这性能直接把桌面超算的天花板往上抬了一大截。



另一大亮点是内置的趋境科技AIMA推理智能管控平台,搞过模型部署的兄弟们都懂:装驱动、搞依赖库挺耗费时间的,而AIMA内置AI Agent,能自动检测硬件、匹配最优配置、一键部署,开箱即用真不是吹的。而且它的核心功能100%离线可用——对于重视数据安全隐私的企业级场景来说,这简直是神器。而且系统还会自己跑基准测试、学习最优配置,越用越聪明,运维成本也被压到了极低。

桌面AI的民主化,从技嘉AI TOP ATOM开始



这次技嘉ATOM桌面AI超算竞赛让我感触最深的,是AI算力真正在走向民主化。以前跑大模型默认都得靠云端服务器或高价工作站,而现在一台巴掌大的设备就能轻松搞定本地AI大模型。无论个人开发者、高校师生、爱好者,都能轻松在本地离线跑模型做调校;而且它可以不依赖网络而离线使用、也无数据泄露风险,特别适配对隐私或数据安全要求很高的使用场景。



我觉得消费级桌面AI这场变革,技嘉用AI TOP ATOM这个小钢炮点起了一把火。轻量、高能效、低门槛,这才是未来AI该有的样子,这波我必须得给技嘉ATOM狠狠点赞。最后,我也希望未来能有更多的用户能用上这种AI超算平台,并做出更有价值的AI应用成果。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
知名港星癌细胞扩散至脑部,闻到身上有尸臭味,剩四分之一条人命

知名港星癌细胞扩散至脑部,闻到身上有尸臭味,剩四分之一条人命

叨唠
2026-03-15 17:36:49
《爸爸去哪儿》11个孩子变化大,石头高考落榜,黄多多最让人意外

《爸爸去哪儿》11个孩子变化大,石头高考落榜,黄多多最让人意外

娱说瑜悦
2026-09-10 18:22:08
四大项目均无缘奥运!赖亚文当初豪言沦为笑话,排协必须有人担责

四大项目均无缘奥运!赖亚文当初豪言沦为笑话,排协必须有人担责

金毛爱女排
2026-09-11 20:25:45
中网资格赛名单炸锅!大满贯冠军扎堆抢票,郑钦文持外卡直通正赛

中网资格赛名单炸锅!大满贯冠军扎堆抢票,郑钦文持外卡直通正赛

刘哥谈体育
2026-09-12 10:29:45
订单接到手软!98年姑娘月进账18万元,凌晨四点就起床开工,“欠了几万个没发货”

订单接到手软!98年姑娘月进账18万元,凌晨四点就起床开工,“欠了几万个没发货”

台州交通广播
2026-08-22 19:07:31
第二个菲律宾出现?主动邀请美国重启军演,中方近70年友谊喂了狗

第二个菲律宾出现?主动邀请美国重启军演,中方近70年友谊喂了狗

真的好爱你
2026-09-10 18:48:38
“典型的上梁不正下梁歪!”家长发视频炫耀,家里没有一个正常人!

“典型的上梁不正下梁歪!”家长发视频炫耀,家里没有一个正常人!

林林先生
2026-08-29 10:51:30
中秋节前,我国或将迎来四大涨潮:除鸡蛋外,这三样也要涨价了!

中秋节前,我国或将迎来四大涨潮:除鸡蛋外,这三样也要涨价了!

瓦伦西亚月亮
2026-09-12 06:05:20
马斯克:我用星链把地球包住!中国:我在你下面包一层,挡住你!

马斯克:我用星链把地球包住!中国:我在你下面包一层,挡住你!

有牙的兔纸
2026-09-10 22:31:54
2000年,歹徒长途客车起色心,3名女子被强奸5次,43人冷眼旁观!

2000年,歹徒长途客车起色心,3名女子被强奸5次,43人冷眼旁观!

法网恢恢
2026-09-06 23:15:14
工信部发布规划:到2030年在高速公路、城市快速路等场景将实现高度自动驾驶

工信部发布规划:到2030年在高速公路、城市快速路等场景将实现高度自动驾驶

每日经济新闻
2026-09-11 20:57:50
他曾是陈云的政治秘书,后任黑龙江省委书记,侄女还是著名歌唱家

他曾是陈云的政治秘书,后任黑龙江省委书记,侄女还是著名歌唱家

舆图看世界
2026-09-09 15:10:03
古代通房丫鬟到底有多惨?陪老爷不算,还被用来干一件“恶心”事

古代通房丫鬟到底有多惨?陪老爷不算,还被用来干一件“恶心”事

掠影后有感
2026-05-17 11:00:03
青岛一饭店老板爆料:投资150多万元加盟火锅自助店,4个多月全赔光,第1个月就赔了20多万,“说好的半年多就能回本呢”

青岛一饭店老板爆料:投资150多万元加盟火锅自助店,4个多月全赔光,第1个月就赔了20多万,“说好的半年多就能回本呢”

大风新闻
2026-09-11 11:24:13
美国终于意识到不对劲:解放军可能不会武力收台,中国另有杀招?

美国终于意识到不对劲:解放军可能不会武力收台,中国另有杀招?

军机Nova
2026-08-30 00:34:10
新iPhone值得买吗?网友纠结了:“半斤机”又贵又重,但折叠屏让人很“上头”

新iPhone值得买吗?网友纠结了:“半斤机”又贵又重,但折叠屏让人很“上头”

澎湃新闻
2026-09-10 15:42:28
直到今天美国才发现,当年冻结俄罗斯3000亿外汇,竟成了本世纪最臭的一步棋

直到今天美国才发现,当年冻结俄罗斯3000亿外汇,竟成了本世纪最臭的一步棋

坠入二次元的海洋
2026-09-02 09:20:36
又开始告洋状了,“摸臀”事件升级,网友开团马来西亚大学,各种投诉已经跟进,这次热闹了!

又开始告洋状了,“摸臀”事件升级,网友开团马来西亚大学,各种投诉已经跟进,这次热闹了!

眼光很亮
2026-09-11 08:45:18
燃油车大局将要定下了?不出意外!未来3年燃油车会有这4个变化!很现实

燃油车大局将要定下了?不出意外!未来3年燃油车会有这4个变化!很现实

趣味萌宠的日常
2026-09-12 11:48:11
私吞上亿善款真相终于大白?官方正式宣布,54岁韩红身份迎来转变

私吞上亿善款真相终于大白?官方正式宣布,54岁韩红身份迎来转变

潋滟晴方DAY
2026-09-09 19:24:21
2026-09-12 18:07:00
Timeow incentive-icons
Timeow
提猫,数码大玩家
512文章数 139关注度
往期回顾 全部

科技要闻

苹果折叠屏比小米华为贵5000元,该怎么选

头条要闻

中国姐弟在智利被勒索213万元 假警局还挂特朗普画像

头条要闻

中国姐弟在智利被勒索213万元 假警局还挂特朗普画像

体育要闻

老鹰真正的底气来自于什么?

娱乐要闻

港媒曝钟丽淇疑患渐冻症,本人发文

财经要闻

继房子茅台后 中产的第3个"神话"破灭了

汽车要闻

全新配色和新样式轮毂 乐道L80星光设计套装限时惊喜价10080元

态度原创

本地
家居
时尚
手机
数码

本地新闻

Onestage x 乐华娱乐暑期巡回选拔2026

家居要闻

2026建博会(广州) 公装联探展交流活动

专栏|一位“皮笑肉不笑”初学者的自述

手机要闻

vivo首发「百度地图双端同步显示」功能

数码要闻

Wildcat Lake款戴尔14轻薄本上市:酷睿5 320版5999元

无障碍浏览 进入关怀版