网易首页 > 网易号 > 正文 申请入驻

美团LongCat-2.5发布:全国产训练、原生多模态、1.6万亿参数

0
分享至

美团 LongCat 发布了新模型 LongCat-2.5,一个面向长程智能体任务的原生多模态模型,3D 质感不错,后面我放了例子

模型总参数 1.6 万亿,激活 480 亿;上下文窗口 1M token,单次最多输出 128K,每百万 token 输入2元(命中缓存 0.04 元)、输出8元

老规矩:本周,你可以在 AGI Bar 免费使用这个 LongCat-2.5 这个模型

从 Benchmark 上看,LongCat-2.5 比以往有着明显提升


和上一代 LongCat-2.0 比,长任务的分数涨得最多(从搭建到调通、独立做完一整个项目这类活)。Terminal Bench v4.0 上,上一代只拿了3.0分,这一代是38.5

LongCat-2.0 LongCat-2.5 Claude Opus 5 Terminal Bench v4.0 在终端里完成整套任务 3.0 Program Bench 从零写出能跑的程序 2.5 AutomationBench 跨软件的办公自动化 15.8 轻触播放 同一套题,LongCat-2.5 的分数是上一代的 3 到 13 倍

LongCat-2.5 具有原生视觉能力,在训练的时候就把图片和文字放在一起训的(图片切成离散 token,和文字 token 排进同一个序列)

对于长任务的强化学习,则是在真实代码环境里,通过真实仓库的 PR 和 issue 来进行训练,也来自 Agent 干活时的失败记录

LongCat-2.5 的训练和推理全程跑在国产 AI 加速卡上,训练单卡吞吐比 DDP 基线高了 86%,推理用 W4A4,吞吐比 W8A8 高了四成多

使用的话,打开 longcat.ai 就能直接对话,本文里的各种小彩蛋均由 longcat 绘制,可以点击猫猫头试试 ⬇️


看图写代码

由于具有视觉能力,写完代码后,LongCat-2.5 会再看一眼效果对不对,以下是一些演示

3D 类的也可以处理,比如这是一棵能转着看的青铜神树,和一个城市沙盘

办公类的任务也没啥大问题,比如丢给它几张经营数据表,它会自己分析完,做成一份带图表的经营分析报告

emmmm...我在每个小标题旁边放了一只猫一定记得戳


效果实测

首先我得说,这个模型对于 3D 渲染的美感效果还是相当不错的。这里我跑了几个 case,给大家看一下:

城市夜景:“做一个夜晚的 3D 城市,上千个外卖订单同时发生,骑手从店铺出发、拖着光轨送到住户楼,时间从傍晚走到深夜”

黑洞与银河:“渲染一个旋转的黑洞:发光的吸积盘、引力透镜扭曲背后的星空;手指快速一划,甩出一串恒星被黑洞吸进去”

可玩的 3D 魔方:“做一个可玩的三阶魔方:拖动旋转、划动转层,一键打乱、一键还原”

粒子钢琴:“做一架粒子钢琴:每按一个键,夜空里炸开一朵粒子烟花,还能自动弹《小星星》”

孔明灯:“中秋夜的河边古镇,点一下屏幕,就从河边放起一盏孔明灯,灯上写着福、安、顺”


图文混合训练

从训练一开始,LongCat-2.5 就把图片和文字放进同一套框架:图片切成离散 token,和文字 token 排在同一个序列里,模型用读文字的同一套方式读图

图片 文字 画 一 座 山 排成同一串 同一个模型 12 305 4087 12 318 2210 7 96 1533 40 771 3092 40 760 3165 21 404 0918 画 一 座 山 轻触播放 每一小块画面都换成一串编号,和文字排在一起,模型用同一套方式读

每一小块画面会换成好几层编号,粗的一层记大轮廓,细的几层补细节,这样换成编号后丢的信息更少。图片按原始分辨率切块


这样做还有一个工程上的好处:图片变成编号这一步可以提前离线算好、存起来。训练时模型直接读现成的编号,计算图里去掉了视觉编码器


真实任务,做强化学习

对于强化学习部分,LongCat 团队把模型放进真实的代码环境,反复练 Agent 各种长任务:读代码、改代码、跑测试、看报错、修改...周而复始

这里的练习题取自 GitHub 公开仓库和美团内部的真实代码任务:挑出 PR 和对应的 issue,让 Agent 自动打标、合成环境,配上 F2P 和 P2P 测试

这里还大量地加入了各种失败记录,通过一套叫 Trajectory2Task 的流程:

  • 先从失败记录里找出错在哪一步

  • 再把当时的运行环境恢复出来

  • 最后倒推出一道能复现、能判分的题

哪里翻车,就点哪里,so easy

Agent 干活翻车 做成能复现的题 反复练到测试通过 练完再去干活 修好前 · 测试失败 修好后 · 测试通过 轻触播放 真实任务里的失败,被改写成带测试的题,模型练到能过为止


这里补充一个小知识,模型很喜欢钻空子,搞些考试小妙招,比如联网搜现成答案,或者翻 git 历史,直接找到当年的修复代码(都是从人类那儿学来的恶习)

所以练习环境会断网,清掉 git 历史和文件缓存,另外用 LLM judge 盯着整条轨迹

练习环境 模型调用的工具 联网搜答案 翻 git 历史找原修复 其他投机取巧 断网 历史清空 裁判模型判作弊 搜索 utils.py 搜索 utils.py 搜索 utils.py 重复调用 · 扣分 轻触播放 断网、清掉历史记录、另派一个模型盯着,分数只能靠真本事拿

为了考虑通用性,模型练习的时候并不绑定固定 harness,为了更好地适配各种环境比如 Claude Code、Codex 等等


国产卡发力

上一代 LongCat-2.0 已经在国产卡上跑通了训练全流程

这一代则在训练和推理两头都提升了效率:

  • 训练按超节点设计并行,单卡吞吐比 DDP 基线高了 86%

  • 推理用 W4A4,吞吐比 W8A8 高了四成多

训练一个 1.6 万亿参数的模型,显存最先告急。LongCat-2.5 用的国产 AI 加速卡,同时还要支撑最长达 1M 的超长上下文训练,美团和芯片厂商为此配合得更深

并行方案以超节点为单位:FSDP、EP、CP 的切分都落在同一个超节点里,大部分通信走超节点内的高速互联

再加上一系列省显存、省拷贝的改动,在所测长上下文监督微调任务中,单卡吞吐比 DDP 基线高了86%


推理这一方面,W4A4 把专家权重与激活都压到 4 bit,能够跑在卡上原生的 INT4 矩阵单元上

8 位整数 W8A8 一次装 4 个数 4 位整数 W4A4 一次装 8 个数 每秒处理的 token 读入提示 8 位 逐字生成 8 位 轻触播放 专家权重与激活都压成 4 位整数,同样的卡每秒多处理约四成 token

作为结果:prefill 吞吐提升43.3%,decode 吞吐提升42.77%;TTFT 降低 15.91%,TPOT 降低 19.72%


跑分

最后放一下跑分,对比一下其他模型,包括 GPT-5.5、GPT-5.6-Sol、Claude Opus 4.8、Claude Opus 5,以及 GLM-5.3、Kimi K3 和 DeepSeek V4.1 Flash


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
记者:阿莫林还在强行找借口,也许他的性格就是这样

记者:阿莫林还在强行找借口,也许他的性格就是这样

懂球帝
2026-11-07 08:15:36
印媒:地球上没有任何力量能阻止印度成为35万亿美元的经济体

印媒:地球上没有任何力量能阻止印度成为35万亿美元的经济体

荆楚寰宇文枢
2026-11-05 23:19:37
中国外交官被限24小时离境,横插两岸统一,这国比美国更过火?

中国外交官被限24小时离境,横插两岸统一,这国比美国更过火?

蜉蝣说
2026-11-05 10:20:15
完了、完了!中国房地产的底牌被高盛扒个底朝天…

完了、完了!中国房地产的底牌被高盛扒个底朝天…

慧翔百科
2026-11-06 08:43:34
吃相难看!延安大学副教授自尽愈演愈烈,荒谬事发生,还不止一件

吃相难看!延安大学副教授自尽愈演愈烈,荒谬事发生,还不止一件

社会日日鲜
2026-11-06 07:04:14
就在刚刚,斯诺克国际锦标赛:决赛竞争激烈,双方四次战平,希金斯5-4威尔逊

就在刚刚,斯诺克国际锦标赛:决赛竞争激烈,双方四次战平,希金斯5-4威尔逊

篮球热嗖
2026-11-07 20:15:51
张萌回应“整容脸”:脂肪吸收了假体取了,原生骨相打了谁的脸?

张萌回应“整容脸”:脂肪吸收了假体取了,原生骨相打了谁的脸?

小莜读史
2026-11-06 14:44:13
重大损失!谢莹莹逝世

重大损失!谢莹莹逝世

上观新闻
2026-11-07 17:04:54
太惨了,北京某大厂被曝裁员40%,网友说:计算机土木化了!

太惨了,北京某大厂被曝裁员40%,网友说:计算机土木化了!

黯泉
2026-11-06 11:38:02
重磅:东风-61突然入列,中国为何此刻掀开核底牌?

重磅:东风-61突然入列,中国为何此刻掀开核底牌?

华山穹剑
2026-11-07 19:47:07
“迎接APEC,深圳的石墩子都在努力”

“迎接APEC,深圳的石墩子都在努力”

深圳微时光
2026-11-07 19:05:13
歌手杨坤公布病情

歌手杨坤公布病情

极目新闻
2026-11-06 09:30:31
时隔305天轰20+!林葳20分钟20+4+3大爆发 率俄勒冈两战全胜

时隔305天轰20+!林葳20分钟20+4+3大爆发 率俄勒冈两战全胜

醉卧浮生
2026-11-07 09:08:01
突发!63岁冯远征不再担任北京人艺院长,成北京人艺历史上任职时间最短的院长

突发!63岁冯远征不再担任北京人艺院长,成北京人艺历史上任职时间最短的院长

叨唠
2026-11-07 00:05:25
9换2交易发威,华子安心养伤!5年1.12亿押对宝,库明加也打出来了

9换2交易发威,华子安心养伤!5年1.12亿押对宝,库明加也打出来了

锅子篮球
2026-11-07 17:36:32
农村多地滞销烂地里!5毛一斤贱卖不够工钱,农民:再也不种了

农村多地滞销烂地里!5毛一斤贱卖不够工钱,农民:再也不种了

邹小蘑菇
2026-11-06 11:22:45
中纪委出台反腐新规,贪官末路来了!无论在职退休一律严惩

中纪委出台反腐新规,贪官末路来了!无论在职退休一律严惩

细说职场
2026-11-07 11:17:06
新势力集体沉默!工信部第413批新车申报量锐减背后:新规阻击速成车,合资新能源加速入场

新势力集体沉默!工信部第413批新车申报量锐减背后:新规阻击速成车,合资新能源加速入场

每日经济新闻
2026-11-05 22:48:02
违背当局宣传口径的俄挺战博主被拘

违背当局宣传口径的俄挺战博主被拘

名人苟或
2026-11-06 15:37:20
目前国内最有希望举办下一届G20峰会的城市分析

目前国内最有希望举办下一届G20峰会的城市分析

花小猫的美食日常
2026-11-07 06:46:58
2026-11-07 22:04:49
赛博禅心
赛博禅心
拜AI古佛,修赛博禅心
623文章数 59关注度
往期回顾 全部

科技要闻

AI机房被卡,美股重挫!英伟达大跌9%

头条要闻

丈夫凌晨4点和陌生女子通话 妻子赌气与异性开房3天

头条要闻

丈夫凌晨4点和陌生女子通话 妻子赌气与异性开房3天

体育要闻

40岁,正是绝杀的年纪!

娱乐要闻

42岁的唐嫣,又上热搜了

财经要闻

市场能接受AI繁荣退潮吗?

汽车要闻

限时权益价8.88万 吉利星愿STAR限定系列发布

态度原创

旅游
游戏
本地
房产
公开课

旅游要闻

直播间低价旅游卡兑现难 文旅消费陷阱如何破?

又是类“魂”?影之刃零的沙雕梗图,已经火遍全网了

本地新闻

乌兰察布:以前种土豆,现在种Token

房产要闻

突发!海口新政:小户型回来了!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版