网易首页 > 网易号 > 正文 申请入驻

便宜60%却更贵:Meta新模型实测多花0.4美元

0
分享至

Meta在10月12日发布Muse Wonder,距离Muse Spark 1.1开放Meta付费Model API大约三个月。Meta称Muse Wonder系列在个人与专业智能体任务上表现强劲,在内部MemoryBench记忆测试中登顶,Full版本在DeepSWE、SWE-Marathon等编程基准上领先。


它的模型卡把Fable 5.1列在对比模型里,Meta的发布帖也把Fable 5.1的分数和自己的分数并排公布。Fable 5.1是Anthropic的顶级模型之一,这种对比本身就带着火药味。

Muse Wonder分两个版本。标准版通过Model API和Meta的编程智能体Muse Code提供;能力更强的Muse Wonder Full只在Muse Code的最高订阅档里开放。

价格是这场对比里最扎眼的数字。Muse Wonder在Meta Model API上每百万输入token收4美元,每百万输出token收20美元。Anthropic的Claude Fable 5.1于9月发布,价格是10美元和50美元,通过API和Claude付费计划提供。按token单价算,Muse Wonder便宜60%。缓存输入会缩小差距:Meta每百万缓存输入token收0.20美元,Fable 5.1是0.25美元。

如果它真能跑到Fable的水平,对整天跑智能体的团队来说是一笔大钱。于是有人拿标准版Muse Wonder和Fable 5.1做了三场硬碰硬的智能体与记忆任务测试。

测试方式:Muse Wonder走OpenRouter、由Meta提供服务,Fable 5.1走Anthropic的API。每个模型每项测试跑一次,用默认推理设置。Meta公布的对比用的是最大推理强度。评分脚本对照事先建好并核验过的答案键打分。每项只跑一次,换一次运行结果可能不同。

三项测试分别是:

  • 智能体修bug——一个27模块的Python任务队列库,三个互相影响的bug,外加一个本身就写错的测试。每个模型用工具读、搜、改、跑测试,上限25轮。
  • 事故调查——20个假服务在级联故障期间的日志、指标、部署历史和配置历史。根因是一次配置变更,藏在两次诱饵部署和一个时钟慢263秒的服务器后面。
  • 长会话记忆——一场50轮的脚本化对话,关于一个webhook中继服务,含25条项目规则,其中8条后来被改过、3条只是暗示。最后每个模型写出配置和代码,再做八题回忆测验。

修bug测试里,两个模型都把第一个bug追到了正确的文件,尽管报错信息指向别处。两个都修好了第三个bug,没弄坏22个回归测试中的任何一个,都没去动那个写错的测试,也都解释了它错在哪。

差别在第二个bug。Fable通过了全部六个隐藏测试。Muse过了五个,因为它的修复仍然把旧的尝试次数发给了任务的失败事件。

价格上,Muse用了大约两倍的输入token,所以尽管单价更低,实际花费约为两倍。两个模型的成本都含提示缓存折扣。最终数字:

  • Muse:15轮,输入269,615,输出4,627,0.75美元,55.9秒。
  • Fable:14轮,输入138,213,输出3,132,0.39美元,68.5秒。

事故调查测试里,两个模型都是10分满分。都指出配置变更CFG-4470是根因,都排除了两次诱饵部署,都抓到了结账服务上那个慢时钟,也都按正确顺序列出了全部九个受影响服务。

Fable六轮就到位。Muse用了13轮,沿途读了更多数据,尽管它等待模型的总时间更少。同样,Muse因为token用量高而花了更多钱,尽管单价更低。最终数字:

  • Muse:13轮,输入327,587,输出8,811,1.03美元,69.1秒。
  • Fable:6轮,输入108,128,输出8,593,0.89美元,88.3秒。

长会话记忆测试制造了最大的性能差距。Muse在最终交付物上拿到25分满分。它对全部八条被改过的规则都用了最新值,三条暗示规则也全部命中,包括写出能在Python 3.8上跑的代码,因为客户的服务器就是3.8。它在测验里也拿到8分满分,并对对话从未覆盖的三个问题全部回答“unknown”。

Fable在这项测试里得了零分。第5轮时,Anthropic的API返回了一次拒绝,类别是“cyber”。那一轮要求模型从环境变量里读取中继的目标URL。Fable在50轮里拒绝了34轮,包括最终交付物和测验。这个项目只是一个普通的webhook中继,和网络安全毫无关系。

这件事格外有意思,因为Anthropic称,使用Fable 5.1的Claude Code用户每会话遇到的网络安全防护干预应比Fable 5少约60%。Fable 5从未因为这种原因跳过测试工作。按Anthropic的指引,测试者丢弃了被拒绝的输出、保留自己的消息,所以Fable仍然拥有每一条规则。更早一次把被拒轮次留在历史里的尝试引来了45次拒绝,于是重跑。Anthropic建议为被拒请求设置回退到另一个Claude模型,测试者没有这么做,因为那测的就是另一个模型了。Anthropic自己的Fable 5.1基准把带cyber标记的任务交给了Claude Opus 4.8。

因为Fable拒绝了工作,这项测试说明不了它的长会话记忆能力。它确实显示了两个模型如何对待可能被cyber过滤器误判为安全工作的日常后端代码。Muse完成了任务,25分满分。Muse的数字:50轮,输入93,977,输出9,848,0.46美元,143.2秒。

结论层面:在智能体工作上,Muse Wonder达到了Fable 5.1的水平,尽管Meta自己的基准表显示标准版在一些智能体测试上落后于Fable 5.1,包括OSWorld。它在事故调查上追平了Fable,在修bug上只差一个隐藏测试。

但测试里它没省钱。Muse每项任务用的token更多,总计2.25美元对Fable的1.85美元。Fable的总计里包含它拒绝的那场记忆会话的0.57美元和119,187个输入token;在两个模型都完成的两项测试上,Muse花了1.78美元,Fable花了1.28美元。

测试者的判断是:Muse Wonder比预期更接近Fable 5.1。但就智能体调试和调查而言,仍然会选Fable 5.1——它略准一些,用的轮次更少,测试中总花费也更低。当Fable的cyber防护让工作无法进行时,Muse Wonder是一个替代选项。只是没有数据把Meta的价格和其他模型对比,无法确认这个费率是否合理。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
两亿灵活就业,填不满社保的缺口

两亿灵活就业,填不满社保的缺口

大何日拱一卒
2026-10-16 19:48:56
刹车爆了、车撞了、人被墙了:NASCAR终于松口允许换刹车

刹车爆了、车撞了、人被墙了:NASCAR终于松口允许换刹车

日常碎碎念啊
2026-10-17 10:54:11
刚去查了张本宇的底,有些话憋了挺久,原来当年他全家改国籍,真不全是为了钱,更多是没路走了

刚去查了张本宇的底,有些话憋了挺久,原来当年他全家改国籍,真不全是为了钱,更多是没路走了

冰雨落花h
2026-10-15 20:29:12
安东诺夫机场无冤魂,看透俄乌战争的本质!

安东诺夫机场无冤魂,看透俄乌战争的本质!

梦归秋辰
2026-10-16 17:15:42
陈滢与张智霖破格演出!秀蜜桃却引发AI质疑,网民意见两极:十分尴尬

陈滢与张智霖破格演出!秀蜜桃却引发AI质疑,网民意见两极:十分尴尬

TVB资讯台
2026-10-17 00:18:24
轮到日本掀桌,中俄警告无效,日本正式宣布,高市:拥核不再是选择

轮到日本掀桌,中俄警告无效,日本正式宣布,高市:拥核不再是选择

徐癘解说
2026-10-17 10:00:20
必须警惕“蔡正元现象”在大陆的泛滥

必须警惕“蔡正元现象”在大陆的泛滥

游文刀
2026-10-17 23:39:34
没有北京户口但常住北京的老人注意:年满60岁起,这几笔待遇可别白白错过

没有北京户口但常住北京的老人注意:年满60岁起,这几笔待遇可别白白错过

娱乐的硬糖吖
2026-10-18 01:49:52
拼多多员工:离职竞业两年,今年考上上海事业单位。这总不在限制名单上吧,已上班

拼多多员工:离职竞业两年,今年考上上海事业单位。这总不在限制名单上吧,已上班

蚂蚁大喇叭
2026-10-17 17:50:36
APEC之后,对深圳有什么影响?深圳会不会因此一飞冲天?

APEC之后,对深圳有什么影响?深圳会不会因此一飞冲天?

小蜜情感说
2026-10-18 06:43:31
国产手机集体降价,力度有点大啊!

国产手机集体降价,力度有点大啊!

果粉俱乐部
2026-10-17 13:55:06
成都一场婚礼的寒酸程度把全国人民都看愣了

成都一场婚礼的寒酸程度把全国人民都看愣了

七月生活情感驿站
2026-10-11 21:16:41
状元归来!时隔610天!西蒙斯再次爆发

状元归来!时隔610天!西蒙斯再次爆发

篮球教学论坛
2026-10-18 12:53:20
美媒眼馋:中国造出了美国人喜欢的车,却不是给美国的

美媒眼馋:中国造出了美国人喜欢的车,却不是给美国的

观察者网
2026-10-15 20:04:24
上海徐浦大桥发生惨烈车祸,变道致多车相撞有死伤!监控画面曝出

上海徐浦大桥发生惨烈车祸,变道致多车相撞有死伤!监控画面曝出

胡侃社会百态
2026-10-17 18:38:26
又一电诈头目落网!坑害国人超27亿,杀人不眨眼,全网呼吁查赵薇

又一电诈头目落网!坑害国人超27亿,杀人不眨眼,全网呼吁查赵薇

泪满过眼
2026-10-10 07:24:15
徐艺洋弟弟发千字长文力挺姐姐 首次曝光生产细节并怒斥网暴

徐艺洋弟弟发千字长文力挺姐姐 首次曝光生产细节并怒斥网暴

可乐谈情感
2026-10-18 09:23:22
终于知道苹果直营店的员工每天都很有活力的原因了,网友:门槛高

终于知道苹果直营店的员工每天都很有活力的原因了,网友:门槛高

另子维爱读史
2026-05-23 08:00:45
零容忍!CBA动真格了,官宣新赛季首张罚单,上海却依然平安无事

零容忍!CBA动真格了,官宣新赛季首张罚单,上海却依然平安无事

多特体育说
2026-10-17 22:51:37
社会上开始出现独居青年猝死家中的事了,媒体报道北京一个47岁的外卖员出租屋猝死后一个月才被发现!

社会上开始出现独居青年猝死家中的事了,媒体报道北京一个47岁的外卖员出租屋猝死后一个月才被发现!

黯泉
2026-10-18 10:22:01
2026-10-18 13:39:00
算力游侠
算力游侠
游走在API与报错之间,用魔法(AI)打败魔法的非硬核玩家。
213文章数 97关注度
往期回顾 全部

科技要闻

王江舟院士:6G到底是不是骗局 是不是收割

头条要闻

特斯拉飞行汽车在美国引发疑问:从哪起飞 是否真能飞

头条要闻

特斯拉飞行汽车在美国引发疑问:从哪起飞 是否真能飞

体育要闻

升级版杨瀚森再闯难关:当上开拓者第三中锋还得拼

娱乐要闻

曝郭麒麟与25岁知名女星已经结婚,女方回应关系

财经要闻

马斯克:美债问题只能靠AI和机器人解决

汽车要闻

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

本地
时尚
房产
公开课
军事航空

本地新闻

因新荣记出圈,这座浙东小城才是吃货天堂

重阳寻香:一炉香,一枚囊,她们以手传香

房产要闻

利好密集落地+现房好房断档,广州楼市买入窗口,正在倒计时!

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

乌克兰全国超15处重要能源设施遭俄袭击 泽连斯基发声

无障碍浏览 进入关怀版