网易首页 > 网易号 > 正文 申请入驻

便宜60%却更贵:Meta新模型实测多花0.4美元

0
分享至

Meta在10月12日发布Muse Wonder,距离Muse Spark 1.1开放Meta付费Model API大约三个月。Meta称Muse Wonder系列在个人与专业智能体任务上表现强劲,在内部MemoryBench记忆测试中登顶,Full版本在DeepSWE、SWE-Marathon等编程基准上领先。


它的模型卡把Fable 5.1列在对比模型里,Meta的发布帖也把Fable 5.1的分数和自己的分数并排公布。Fable 5.1是Anthropic的顶级模型之一,这种对比本身就带着火药味。

Muse Wonder分两个版本。标准版通过Model API和Meta的编程智能体Muse Code提供;能力更强的Muse Wonder Full只在Muse Code的最高订阅档里开放。

价格是这场对比里最扎眼的数字。Muse Wonder在Meta Model API上每百万输入token收4美元,每百万输出token收20美元。Anthropic的Claude Fable 5.1于9月发布,价格是10美元和50美元,通过API和Claude付费计划提供。按token单价算,Muse Wonder便宜60%。缓存输入会缩小差距:Meta每百万缓存输入token收0.20美元,Fable 5.1是0.25美元。

如果它真能跑到Fable的水平,对整天跑智能体的团队来说是一笔大钱。于是有人拿标准版Muse Wonder和Fable 5.1做了三场硬碰硬的智能体与记忆任务测试。

测试方式:Muse Wonder走OpenRouter、由Meta提供服务,Fable 5.1走Anthropic的API。每个模型每项测试跑一次,用默认推理设置。Meta公布的对比用的是最大推理强度。评分脚本对照事先建好并核验过的答案键打分。每项只跑一次,换一次运行结果可能不同。

三项测试分别是:

  • 智能体修bug——一个27模块的Python任务队列库,三个互相影响的bug,外加一个本身就写错的测试。每个模型用工具读、搜、改、跑测试,上限25轮。
  • 事故调查——20个假服务在级联故障期间的日志、指标、部署历史和配置历史。根因是一次配置变更,藏在两次诱饵部署和一个时钟慢263秒的服务器后面。
  • 长会话记忆——一场50轮的脚本化对话,关于一个webhook中继服务,含25条项目规则,其中8条后来被改过、3条只是暗示。最后每个模型写出配置和代码,再做八题回忆测验。

修bug测试里,两个模型都把第一个bug追到了正确的文件,尽管报错信息指向别处。两个都修好了第三个bug,没弄坏22个回归测试中的任何一个,都没去动那个写错的测试,也都解释了它错在哪。

差别在第二个bug。Fable通过了全部六个隐藏测试。Muse过了五个,因为它的修复仍然把旧的尝试次数发给了任务的失败事件。

价格上,Muse用了大约两倍的输入token,所以尽管单价更低,实际花费约为两倍。两个模型的成本都含提示缓存折扣。最终数字:

  • Muse:15轮,输入269,615,输出4,627,0.75美元,55.9秒。
  • Fable:14轮,输入138,213,输出3,132,0.39美元,68.5秒。

事故调查测试里,两个模型都是10分满分。都指出配置变更CFG-4470是根因,都排除了两次诱饵部署,都抓到了结账服务上那个慢时钟,也都按正确顺序列出了全部九个受影响服务。

Fable六轮就到位。Muse用了13轮,沿途读了更多数据,尽管它等待模型的总时间更少。同样,Muse因为token用量高而花了更多钱,尽管单价更低。最终数字:

  • Muse:13轮,输入327,587,输出8,811,1.03美元,69.1秒。
  • Fable:6轮,输入108,128,输出8,593,0.89美元,88.3秒。

长会话记忆测试制造了最大的性能差距。Muse在最终交付物上拿到25分满分。它对全部八条被改过的规则都用了最新值,三条暗示规则也全部命中,包括写出能在Python 3.8上跑的代码,因为客户的服务器就是3.8。它在测验里也拿到8分满分,并对对话从未覆盖的三个问题全部回答“unknown”。

Fable在这项测试里得了零分。第5轮时,Anthropic的API返回了一次拒绝,类别是“cyber”。那一轮要求模型从环境变量里读取中继的目标URL。Fable在50轮里拒绝了34轮,包括最终交付物和测验。这个项目只是一个普通的webhook中继,和网络安全毫无关系。

这件事格外有意思,因为Anthropic称,使用Fable 5.1的Claude Code用户每会话遇到的网络安全防护干预应比Fable 5少约60%。Fable 5从未因为这种原因跳过测试工作。按Anthropic的指引,测试者丢弃了被拒绝的输出、保留自己的消息,所以Fable仍然拥有每一条规则。更早一次把被拒轮次留在历史里的尝试引来了45次拒绝,于是重跑。Anthropic建议为被拒请求设置回退到另一个Claude模型,测试者没有这么做,因为那测的就是另一个模型了。Anthropic自己的Fable 5.1基准把带cyber标记的任务交给了Claude Opus 4.8。

因为Fable拒绝了工作,这项测试说明不了它的长会话记忆能力。它确实显示了两个模型如何对待可能被cyber过滤器误判为安全工作的日常后端代码。Muse完成了任务,25分满分。Muse的数字:50轮,输入93,977,输出9,848,0.46美元,143.2秒。

结论层面:在智能体工作上,Muse Wonder达到了Fable 5.1的水平,尽管Meta自己的基准表显示标准版在一些智能体测试上落后于Fable 5.1,包括OSWorld。它在事故调查上追平了Fable,在修bug上只差一个隐藏测试。

但测试里它没省钱。Muse每项任务用的token更多,总计2.25美元对Fable的1.85美元。Fable的总计里包含它拒绝的那场记忆会话的0.57美元和119,187个输入token;在两个模型都完成的两项测试上,Muse花了1.78美元,Fable花了1.28美元。

测试者的判断是:Muse Wonder比预期更接近Fable 5.1。但就智能体调试和调查而言,仍然会选Fable 5.1——它略准一些,用的轮次更少,测试中总花费也更低。当Fable的cyber防护让工作无法进行时,Muse Wonder是一个替代选项。只是没有数据把Meta的价格和其他模型对比,无法确认这个费率是否合理。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中国大使回应:若动武可轻易取胜,菲律宾应庆幸有中国这样的邻居

中国大使回应:若动武可轻易取胜,菲律宾应庆幸有中国这样的邻居

流史岁月
2026-10-17 17:30:09
成都打人宝妈后续凄惨:曝婚姻破裂,家人冷漠,本人摆烂害了孩子

成都打人宝妈后续凄惨:曝婚姻破裂,家人冷漠,本人摆烂害了孩子

青梅侃史啊
2026-10-17 07:08:43
从“政府来养老”到“第一责任人”:谁在自力更生,谁在稳享保障?

从“政府来养老”到“第一责任人”:谁在自力更生,谁在稳享保障?

马小白
2026-10-17 17:04:07
被美方驱逐的美籍华人发现:恢复中国籍的门槛,比拿美国绿卡还高

被美方驱逐的美籍华人发现:恢复中国籍的门槛,比拿美国绿卡还高

浯江孤舟
2026-10-17 10:47:18
普京:包围并消灭2000人的乌军集群,且在460平方公里区域内实施包围,这非比寻常;乌克兰打击“俄罗斯的谷歌”,互联网成新战场前线

普京:包围并消灭2000人的乌军集群,且在460平方公里区域内实施包围,这非比寻常;乌克兰打击“俄罗斯的谷歌”,互联网成新战场前线

扬子晚报
2026-10-17 19:49:23
学历贬值,日本的剧本已经演完了,我们几乎在逐页重演

学历贬值,日本的剧本已经演完了,我们几乎在逐页重演

起点人文
2026-10-15 13:07:03
跌过那么多轮,为什么偏偏这次最痛?

跌过那么多轮,为什么偏偏这次最痛?

资本时差
2026-10-17 23:53:48
虱子从中国人生活里消失,根本原因不是爱干净,真相让人傻眼

虱子从中国人生活里消失,根本原因不是爱干净,真相让人傻眼

奇葩游戏酱
2026-10-17 06:27:30
粮油要变天?下半年开始,大米、面粉、食用油或迎新一轮行业洗牌

粮油要变天?下半年开始,大米、面粉、食用油或迎新一轮行业洗牌

云霄纪史观
2026-10-17 01:39:00
不接受道歉!朱之文回应被举报十几场商演取消: 我也会给他找麻烦

不接受道歉!朱之文回应被举报十几场商演取消: 我也会给他找麻烦

青辉
2026-10-17 15:38:44
为特朗普清道,为普京安排骑行,为黄仁勋等嘉宾腾出深南大道:深圳APEC会议周,整座城市进入“高级礼宾待客状态”

为特朗普清道,为普京安排骑行,为黄仁勋等嘉宾腾出深南大道:深圳APEC会议周,整座城市进入“高级礼宾待客状态”

谈史论今1
2026-10-17 17:07:50
震惊!上海宝山一则相亲启事引热议:86年本科男,愿做上门女婿,上海本地女生,有残疾缺陷也可

震惊!上海宝山一则相亲启事引热议:86年本科男,愿做上门女婿,上海本地女生,有残疾缺陷也可

火山詩话
2026-10-18 06:00:20
恶魔就在身边,长沙风光大老板,竟是缅北核心大恶人!

恶魔就在身边,长沙风光大老板,竟是缅北核心大恶人!

娱乐圈见解说
2026-10-17 14:11:51
马斯克造出一辆能上天的汽车,车评人:体会到了李鸿章访美的无力感

马斯克造出一辆能上天的汽车,车评人:体会到了李鸿章访美的无力感

可达鸭面面观
2026-10-17 13:03:52
详解特斯拉会飞的汽车:自己给高压空气罐推进器充气,倒挂爬升用的是风扇吸力

详解特斯拉会飞的汽车:自己给高压空气罐推进器充气,倒挂爬升用的是风扇吸力

红星新闻
2026-10-16 19:09:29
2026武网诞生两匹最大“黑马”:世界排名170的卡塔尔杀进决赛,波兰“月亮姐”击败发小斯瓦泰克晋级,有望夺冠!

2026武网诞生两匹最大“黑马”:世界排名170的卡塔尔杀进决赛,波兰“月亮姐”击败发小斯瓦泰克晋级,有望夺冠!

极目新闻
2026-10-17 22:52:22
男子逼好友睡他妻子,2010年好友不想睡了,他将好友的妻子和孩子杀死

男子逼好友睡他妻子,2010年好友不想睡了,他将好友的妻子和孩子杀死

汉史趣闻
2026-10-17 19:38:38
广西大学通报一学生死亡:警方初步认定为高坠死亡,排除刑事案件

广西大学通报一学生死亡:警方初步认定为高坠死亡,排除刑事案件

澎湃新闻
2026-10-18 00:26:03
硬刚张继科!刘丁硕自曝曾得抑郁症:想结束 输给樊振东是最高光时刻

硬刚张继科!刘丁硕自曝曾得抑郁症:想结束 输给樊振东是最高光时刻

念洲
2026-10-18 07:09:46
不出意外,2027年开始,按摩店、足疗店、洗浴店将迎来“大洗牌”

不出意外,2027年开始,按摩店、足疗店、洗浴店将迎来“大洗牌”

白米饭怎么吃
2026-10-17 22:42:33
2026-10-18 09:51:00
算力游侠
算力游侠
游走在API与报错之间,用魔法(AI)打败魔法的非硬核玩家。
204文章数 97关注度
往期回顾 全部

科技要闻

刘煜辉:99%的黄金分析师报告一钱不值

头条要闻

女生科目三没过出来发现教练走了 跟其语音听到麻将声

头条要闻

女生科目三没过出来发现教练走了 跟其语音听到麻将声

体育要闻

升级版杨瀚森再闯难关:当上开拓者第三中锋还得拼

娱乐要闻

李连杰回应抛妻弃女传闻,透露四个女儿关系

财经要闻

马斯克:美债问题只能靠AI和机器人解决

汽车要闻

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

手机
家居
房产
健康
教育

手机要闻

这是一组iPhone 18 Pro系列销量数据,行业人士:炸裂

家居要闻

2026建博会(广州) 公装联探展交流活动

房产要闻

利好密集落地+现房好房断档,广州楼市买入窗口,正在倒计时!

看着很健康的人,怎么会突然猝死?

教育要闻

故宫:为什么一定要建在一条中轴线上?

无障碍浏览 进入关怀版