网易首页 > 网易号 > 正文 申请入驻

美团LongCat-2.5发布:全国产训练、原生多模态、1.6万亿参数

0
分享至

美团 LongCat 发布了新模型 LongCat-2.5,一个面向长程智能体任务的原生多模态模型,3D 质感不错,后面我放了例子

模型总参数 1.6 万亿,激活 480 亿;上下文窗口 1M token,单次最多输出 128K,每百万 token 输入2元(命中缓存 0.04 元)、输出8元

老规矩:本周,你可以在 AGI Bar 免费使用这个 LongCat-2.5 这个模型

从 Benchmark 上看,LongCat-2.5 比以往有着明显提升


和上一代 LongCat-2.0 比,长任务的分数涨得最多(从搭建到调通、独立做完一整个项目这类活)。Terminal Bench v4.0 上,上一代只拿了3.0分,这一代是38.5

LongCat-2.0 LongCat-2.5 Claude Opus 5 Terminal Bench v4.0 在终端里完成整套任务 3.0 Program Bench 从零写出能跑的程序 2.5 AutomationBench 跨软件的办公自动化 15.8 轻触播放 同一套题,LongCat-2.5 的分数是上一代的 3 到 13 倍

LongCat-2.5 具有原生视觉能力,在训练的时候就把图片和文字放在一起训的(图片切成离散 token,和文字 token 排进同一个序列)

对于长任务的强化学习,则是在真实代码环境里,通过真实仓库的 PR 和 issue 来进行训练,也来自 Agent 干活时的失败记录

LongCat-2.5 的训练和推理全程跑在国产 AI 加速卡上,训练单卡吞吐比 DDP 基线高了 86%,推理用 W4A4,吞吐比 W8A8 高了四成多

使用的话,打开 longcat.ai 就能直接对话,本文里的各种小彩蛋均由 longcat 绘制,可以点击猫猫头试试 ⬇️


看图写代码

由于具有视觉能力,写完代码后,LongCat-2.5 会再看一眼效果对不对,以下是一些演示

3D 类的也可以处理,比如这是一棵能转着看的青铜神树,和一个城市沙盘

办公类的任务也没啥大问题,比如丢给它几张经营数据表,它会自己分析完,做成一份带图表的经营分析报告

emmmm...我在每个小标题旁边放了一只猫一定记得戳


效果实测

首先我得说,这个模型对于 3D 渲染的美感效果还是相当不错的。这里我跑了几个 case,给大家看一下:

城市夜景:“做一个夜晚的 3D 城市,上千个外卖订单同时发生,骑手从店铺出发、拖着光轨送到住户楼,时间从傍晚走到深夜”

黑洞与银河:“渲染一个旋转的黑洞:发光的吸积盘、引力透镜扭曲背后的星空;手指快速一划,甩出一串恒星被黑洞吸进去”

可玩的 3D 魔方:“做一个可玩的三阶魔方:拖动旋转、划动转层,一键打乱、一键还原”

粒子钢琴:“做一架粒子钢琴:每按一个键,夜空里炸开一朵粒子烟花,还能自动弹《小星星》”

孔明灯:“中秋夜的河边古镇,点一下屏幕,就从河边放起一盏孔明灯,灯上写着福、安、顺”


图文混合训练

从训练一开始,LongCat-2.5 就把图片和文字放进同一套框架:图片切成离散 token,和文字 token 排在同一个序列里,模型用读文字的同一套方式读图

图片 文字 画 一 座 山 排成同一串 同一个模型 12 305 4087 12 318 2210 7 96 1533 40 771 3092 40 760 3165 21 404 0918 画 一 座 山 轻触播放 每一小块画面都换成一串编号,和文字排在一起,模型用同一套方式读

每一小块画面会换成好几层编号,粗的一层记大轮廓,细的几层补细节,这样换成编号后丢的信息更少。图片按原始分辨率切块


这样做还有一个工程上的好处:图片变成编号这一步可以提前离线算好、存起来。训练时模型直接读现成的编号,计算图里去掉了视觉编码器


真实任务,做强化学习

对于强化学习部分,LongCat 团队把模型放进真实的代码环境,反复练 Agent 各种长任务:读代码、改代码、跑测试、看报错、修改...周而复始

这里的练习题取自 GitHub 公开仓库和美团内部的真实代码任务:挑出 PR 和对应的 issue,让 Agent 自动打标、合成环境,配上 F2P 和 P2P 测试

这里还大量地加入了各种失败记录,通过一套叫 Trajectory2Task 的流程:

  • 先从失败记录里找出错在哪一步

  • 再把当时的运行环境恢复出来

  • 最后倒推出一道能复现、能判分的题

哪里翻车,就点哪里,so easy

Agent 干活翻车 做成能复现的题 反复练到测试通过 练完再去干活 修好前 · 测试失败 修好后 · 测试通过 轻触播放 真实任务里的失败,被改写成带测试的题,模型练到能过为止


这里补充一个小知识,模型很喜欢钻空子,搞些考试小妙招,比如联网搜现成答案,或者翻 git 历史,直接找到当年的修复代码(都是从人类那儿学来的恶习)

所以练习环境会断网,清掉 git 历史和文件缓存,另外用 LLM judge 盯着整条轨迹

练习环境 模型调用的工具 联网搜答案 翻 git 历史找原修复 其他投机取巧 断网 历史清空 裁判模型判作弊 搜索 utils.py 搜索 utils.py 搜索 utils.py 重复调用 · 扣分 轻触播放 断网、清掉历史记录、另派一个模型盯着,分数只能靠真本事拿

为了考虑通用性,模型练习的时候并不绑定固定 harness,为了更好地适配各种环境比如 Claude Code、Codex 等等


国产卡发力

上一代 LongCat-2.0 已经在国产卡上跑通了训练全流程

这一代则在训练和推理两头都提升了效率:

  • 训练按超节点设计并行,单卡吞吐比 DDP 基线高了 86%

  • 推理用 W4A4,吞吐比 W8A8 高了四成多

训练一个 1.6 万亿参数的模型,显存最先告急。LongCat-2.5 用的国产 AI 加速卡,同时还要支撑最长达 1M 的超长上下文训练,美团和芯片厂商为此配合得更深

并行方案以超节点为单位:FSDP、EP、CP 的切分都落在同一个超节点里,大部分通信走超节点内的高速互联

再加上一系列省显存、省拷贝的改动,在所测长上下文监督微调任务中,单卡吞吐比 DDP 基线高了86%


推理这一方面,W4A4 把专家权重与激活都压到 4 bit,能够跑在卡上原生的 INT4 矩阵单元上

8 位整数 W8A8 一次装 4 个数 4 位整数 W4A4 一次装 8 个数 每秒处理的 token 读入提示 8 位 逐字生成 8 位 轻触播放 专家权重与激活都压成 4 位整数,同样的卡每秒多处理约四成 token

作为结果:prefill 吞吐提升43.3%,decode 吞吐提升42.77%;TTFT 降低 15.91%,TPOT 降低 19.72%


跑分

最后放一下跑分,对比一下其他模型,包括 GPT-5.5、GPT-5.6-Sol、Claude Opus 4.8、Claude Opus 5,以及 GLM-5.3、Kimi K3 和 DeepSeek V4.1 Flash


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“花一千多听个响”这种玩具突然爆火,王俊凯、孙怡也纷纷入坑,隐患不容忽视

“花一千多听个响”这种玩具突然爆火,王俊凯、孙怡也纷纷入坑,隐患不容忽视

新浪财经
2026-11-06 14:32:25
谢玲玲到场支持林恬儿活动:学识善良是真正财富 女性不必依附婚姻

谢玲玲到场支持林恬儿活动:学识善良是真正财富 女性不必依附婚姻

乡野小珥
2026-11-07 19:44:00
上海59岁男子倒在站台去世,路人欲施救被工作人员制止,家属:AED仅步行约1分钟距离,起诉车站被驳回

上海59岁男子倒在站台去世,路人欲施救被工作人员制止,家属:AED仅步行约1分钟距离,起诉车站被驳回

扬子晚报
2026-11-07 14:16:31
印度首富夫人游艇回孟买,素颜满脸斑肚大如萝,穿花睡衣被围着走

印度首富夫人游艇回孟买,素颜满脸斑肚大如萝,穿花睡衣被围着走

誮惜颜a
2026-11-05 15:32:15
医生:再高的糖尿病,没有这8个症状,不必过分焦虑,照常饮食

医生:再高的糖尿病,没有这8个症状,不必过分焦虑,照常饮食

王二哥老搞笑
2026-11-07 09:13:34
厉娜风评大逆转!43岁活得像傻白甜,才懂许飞“背刺”她的原因

厉娜风评大逆转!43岁活得像傻白甜,才懂许飞“背刺”她的原因

北海史记
2026-10-30 16:12:57
从欧洲议会“演讲”,到无人共度圣诞:哈里梅根只剩制造幻象 !

从欧洲议会“演讲”,到无人共度圣诞:哈里梅根只剩制造幻象 !

情感大头说说
2026-11-07 19:24:40
一条街的生意,拴在两千本编制上:县城公务员经济是怎么撑起来的,又是怎么走到今天的

一条街的生意,拴在两千本编制上:县城公务员经济是怎么撑起来的,又是怎么走到今天的

寰球经纬所
2026-11-06 14:19:31
昆明市一栋评估价891万元的别墅降价拍卖,被人底价499万竞得

昆明市一栋评估价891万元的别墅降价拍卖,被人底价499万竞得

爱看剧的阿峰
2026-11-07 18:33:51
美股科技股大幅反弹,AI算力巨头狂飙20%,热门中概股普涨

美股科技股大幅反弹,AI算力巨头狂飙20%,热门中概股普涨

21世纪经济报道
2026-11-07 08:23:31
新疆117岁老奶奶跳舞视频引数百万网友围观,当地:她生育16个子女仅剩5人在世,丈夫30年前去世,目前全家五世同堂共93口人,最小的1岁左右

新疆117岁老奶奶跳舞视频引数百万网友围观,当地:她生育16个子女仅剩5人在世,丈夫30年前去世,目前全家五世同堂共93口人,最小的1岁左右

极目新闻
2026-11-06 18:49:31
多部门介入“母子衣衫不整”事件!

多部门介入“母子衣衫不整”事件!

新动察
2026-10-16 11:00:05
原汁原味无污染?印度环保局长当众喝恒河水,5分钟后被抬走!

原汁原味无污染?印度环保局长当众喝恒河水,5分钟后被抬走!

霁寒飘雪
2026-10-10 11:56:38
年薪12万被批不尊重应届生!张雪怒怼江西都市频道:是不是有病?

年薪12万被批不尊重应届生!张雪怒怼江西都市频道:是不是有病?

青辉
2026-11-07 15:20:09
46:67,内塔尼亚胡或下台,特朗普被打得落花流水,伊朗直接躺赢

46:67,内塔尼亚胡或下台,特朗普被打得落花流水,伊朗直接躺赢

国际法大视野
2026-11-06 17:46:04
网红小姐姐的这身打扮,还挺别致的

网红小姐姐的这身打扮,还挺别致的

美女穿搭分享
2026-10-31 16:21:31
四川女子撇下60岁父母自杀,1个月后父亲不顾反对给女儿开棺

四川女子撇下60岁父母自杀,1个月后父亲不顾反对给女儿开棺

罪案洞察者
2025-03-31 10:36:32
国务院国资委:央企境外资产近10万亿元,全球机构项目超1.7万个

国务院国资委:央企境外资产近10万亿元,全球机构项目超1.7万个

中国青年报
2026-11-06 22:48:28
全新亚洲龙上市13.38万起,再次定义豪华新标准

全新亚洲龙上市13.38万起,再次定义豪华新标准

12缸汽车
2026-11-07 21:13:24
美媒:万斯直接介入 美伊谈判“提级”

美媒:万斯直接介入 美伊谈判“提级”

新华社
2026-11-07 13:23:46
2026-11-07 22:16:49
赛博禅心
赛博禅心
拜AI古佛,修赛博禅心
623文章数 59关注度
往期回顾 全部

科技要闻

AI机房被卡,美股重挫!英伟达大跌9%

头条要闻

丈夫凌晨4点和陌生女子通话 妻子赌气与异性开房3天

头条要闻

丈夫凌晨4点和陌生女子通话 妻子赌气与异性开房3天

体育要闻

40岁,正是绝杀的年纪!

娱乐要闻

42岁的唐嫣,又上热搜了

财经要闻

市场能接受AI繁荣退潮吗?

汽车要闻

限时权益价8.88万 吉利星愿STAR限定系列发布

态度原创

艺术
家居
亲子
本地
公开课

艺术要闻

17位 国外画家笔下的女子

家居要闻

2026建博会(广州) 公装联探展交流活动

亲子要闻

潮州月子中心护理人员持证率是多少?

本地新闻

乌兰察布:以前种土豆,现在种Token

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版