网易首页 > 网易号 > 正文 申请入驻

谷歌终于支棱起来了!Gemini 4 Pro空降Arena榜单,13项跑分碾压GPT-6和Fable

0
分享至


作者 | 四月

谷歌终于舍得放大招了!后附全能王Gemini 4 Pro实测。

过去半年,大模型的排位换了一轮又一轮:GPT-6(Astra)、Fable接连把战场推进到代码、Agent和长程任务,谷歌这边却处于长期被碾压状态。

挤牙膏似的更新Flash系列,真正代表旗舰实力的Pro却迟迟没有完成换代。要知道距离Gemini 3.1 Pro发布,已经过去整整7个月。

原定6月亮相的Gemini 3.5 Pro一再延期。有报道称,Google当时仍在继续补强其Coding能力,延期已经广泛引发内部对团队迭代速度的担忧。到了7月财报会上,Google干脆提前亮牌,劈叉哥宣布,公司早已启动Gemini 4“迄今最雄心勃勃的预训练”。

9月18日消息,谷歌跳过了 Gemini 3系列的小版本更新,Gemini 4直接上阵。昨夜,多名开发者开始在Arena的匿名Battle Mode中抽到一个名为gemini-3.8-flash的模型。问题在于,真正的Gemini 3.8 Flash早在9月2日就已经正式发布,而且已经进入Arena公开榜单。


同一个名字,为什么又突然出现在匿名测试里?更反常的是,这个“3.8 Flash”展现出的能力远远高于公开版本。

很快,LuminaBench、Harshith、Qwinah等长期追踪前沿模型的测试者随后陆续将其指向Google正在测试的Gemini 4 Pro checkpoint,内部代号被曝为“Argon”。

Qwinah还通过超长JSON压力测试称,该模型能够持续输出至接近256K规模。当然,这些参数目前仍属于社区测试结果,尚未得到Google确认。

但真正把这轮讨论的预期值拉满的,还是随后流出的Arena盲测榜单。

13项全能碾压Astra和Fable

按照这份Benchmark对比数据,Gemini 4 Pro在表中列出的13组测试里全部取得最高成绩,对手包括GPT-6 Astra、Claude Fable 5.1、Claude Opus 5和GPT-5.6 Sol。


  • 最直观的Coding测试DeepSWE v1.1中,Gemini 4 Pro拿到88.7%,超过Astra的86.9%;

  • 考察真实知识工作的GDPval-AA v2,达到2064 Elo,同样超过Astra的1994;

  • HLE多学科专家推理,达到72.1%,领先Astra近5个百分点。

而在任务越复杂、链路越长,Gemini 4 Pro表现出的优势更加明显。

在Terminal-Bench 2.1中,它与自家Gemini 4 Flash只有3.2个百分点差距;换到更考验通用Agent长程执行的Terminal-Bench 4.0,差距直接扩大到13.9个百分点。

类似的情况还出现在OSWorld 2.0。Gemini 4 Pro达到86.8%,Gemini 4 Flash为74.9%,拉开11.9个百分点;DeepSWE、HLE以及BioMystery高难任务中,Pro相比Flash也分别领先8.3、8.3和8.3个百分点。

这意味着Gemini 4 Pro的能力提升集中于Agent长程任务,在任务持续时间拉长、步骤增加、需要不断读取状态并重新规划时,性能衰减得更慢。

这恰恰是当前Agent真正卡脖子的地方。DeepSWE本身就是专门为长程软件工程任务设计的测试,需要模型在真实代码库中持续修改和验证;OSWorld 2.0则把Agent扔进真实电脑环境,108项任务中近七成需要人类一小时以上完成,平均需要数百步操作。

Terminal-Bench团队自己总结过,现有Agent最典型的问题,就是难以持续串联多步动作、维护长上下文,并在缺乏人工干预的情况下自主完成复杂工作。

近五分之一的价格

Gemini 4 Pro的价格可能比跑分更凶。

榜单显示,Gemini 4 Pro价格只有每百万Token输入2.25美元、输出11.25美元,而Astra分别达到12美元和60美元。也就是说,Google不是用更贵的旗舰换来了领先,而是以约五分之一的Token价格打出了更高的成绩。

如果这一价格真正落地,势必将拉低A社和OpenAI的价格:旗舰模型的竞争,开始从“谁最强”变成“谁能让最强能力便宜到可以大规模跑Agent”。

当然,目前这张成绩表尚未得到官方认领,还需辩证看待。

以DeepSWE为例,其公开Leaderboard当前Astra成绩约为74.1%,Gemini 3.8 Flash约73.8%,与流出表中的数值口径存在差异,意味着后者可能使用了不同Agent harness、推理配置,或者来自尚未公开的新一轮测试。

实测惊艳

当前,Arena已经跑出了密集测试。比较惊艳的是网页设计。

开发者让Gemini 4 Pro制作一个专题网站,模型最终只用了14分钟,就完成了从页面结构、视觉风格到交互效果的一整套设计。测试者评价:网站“干净、精致”,甚至感叹,早期Gemini模型长期被吐槽的“设计品味”问题,似乎终于解决了。

另一个经典测试,则是“鹈鹕骑自行车”。开发者Harshith表示只给出一句要求:尽可能漂亮地用SVG画一只骑自行车的鹈鹕。Gemini 4 Pro就能用代码完成整幅动态场景,鹈鹕、车轮、骑行动作和背景关系都保持得相当完整。

这类任务难点不只是写SVG,而是要同时处理代码、空间关系和视觉构图。社区随后拿公开版Gemini 3.8 Flash跑同一提示词,成品差距相当明显(可见开篇对比视频)。

第三类测试从“画图”升级到真正的3D交互。

Voxel Pagoda测试中,Gemini 4 Pro大约花5分钟搭出一座可交互的像素风3D宝塔;另一项PS5 SVG测试甚至连续运行约10分钟,不仅细节入微,更展现了模型在持续规划和生成,把复杂成品一次做完的能力。

此外,Lumina将更多关于Gemini 4 Pro评测案例集合放在了 Discord 社区,可移步至 https://discord.com/invite/c9kPfN8Tvd 了解。


声明:本文为 AI 前线原创,不代表平台观点,也不构成投资建议,未经许可禁止转载。

会议推荐

QCon 全球软件开发大会·2026(上海站)将于10 月 22 日—24 日举办。本届大会聚焦 Harness AI 时代的工程实践,从「构建 AI」到「驾驭 AI」,围绕AI Native 架构、Agent Runtime、AI Infra、Agent 安全与可观测、Loop Engineering、具身智能与世界模型等热门技术方向,邀请全球技术社区与产业一线实践者,共同分享 AI Native 时代最具价值的工程经验。查看更多详情可扫码或联系票务经理 18514549229 进行咨询。

今日荐文

你也「在看」吗?

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“晚上8点半的美国学而思火了”,快乐教育成笑话,精英谁不卷?

“晚上8点半的美国学而思火了”,快乐教育成笑话,精英谁不卷?

熙熙说教
2026-10-27 16:50:13
《嫁金钗》大结局:皇后到死不知,扳倒她的不是魏娆,而是那个被她踩在脚下十年的郑婕妤!

《嫁金钗》大结局:皇后到死不知,扳倒她的不是魏娆,而是那个被她踩在脚下十年的郑婕妤!

92的莫莫
2026-10-28 20:02:07
“幸亏我生了儿子”,小学女儿换装视频,让很多家长难以承受

“幸亏我生了儿子”,小学女儿换装视频,让很多家长难以承受

凡知
2026-10-11 12:35:13
陕北8万红军,4.5万人改编八路军,另外3.5万人毛主席的安排真妙

陕北8万红军,4.5万人改编八路军,另外3.5万人毛主席的安排真妙

纪史行者
2026-08-22 01:15:05
差距太大了!全球AI利润:美国独占49%,韩国35%,中国仅4.1%

差距太大了!全球AI利润:美国独占49%,韩国35%,中国仅4.1%

互联网.乱侃秀
2026-10-28 12:09:08
今年首个倒闭行业,快递驿站爆雷,18万家血亏出局,躺赚时代终结

今年首个倒闭行业,快递驿站爆雷,18万家血亏出局,躺赚时代终结

浩渺青史
2026-10-29 03:24:50
曼联将帅和解!卡里克寄望一人复出救命,这后腰组合再不行就完了

曼联将帅和解!卡里克寄望一人复出救命,这后腰组合再不行就完了

罗米的曼联博客
2026-10-29 06:46:08
反诈博主“徽剑”遭买凶杀害,好友追忆:他经营教培公司,出于正义感反诈

反诈博主“徽剑”遭买凶杀害,好友追忆:他经营教培公司,出于正义感反诈

澎湃新闻
2026-10-28 13:54:06
蓉城沉戟大济南,大连欢庆梭鱼湾?宋凯此行成中超最大谜题

蓉城沉戟大济南,大连欢庆梭鱼湾?宋凯此行成中超最大谜题

狮王乱弹
2026-10-29 08:20:03
男子价值500多万元限量版阿斯顿马丁被撞,肇事网约车全责,司机无奈:无商业险,只能分期赔付;平台:愿意承担最低20%至全额责任

男子价值500多万元限量版阿斯顿马丁被撞,肇事网约车全责,司机无奈:无商业险,只能分期赔付;平台:愿意承担最低20%至全额责任

海峡网
2026-10-28 16:26:07
再见了,唐国强,再见了,古月,中国影视迎来新特型演员时代

再见了,唐国强,再见了,古月,中国影视迎来新特型演员时代

与笑相拥m
2026-10-25 10:48:35
麒麟 9050 峰值仅 A20Pro 一半:单核差 55% 多核追七成,华为换打法不拼纸面

麒麟 9050 峰值仅 A20Pro 一半:单核差 55% 多核追七成,华为换打法不拼纸面

向日葵科技杂谈
2026-10-28 08:57:32
“鱼姐不养鱼”被指喝酒作假:用白开水或东方树叶代替酒,把酒倒进垃圾桶……相关账号可能面临断播、封禁处罚

“鱼姐不养鱼”被指喝酒作假:用白开水或东方树叶代替酒,把酒倒进垃圾桶……相关账号可能面临断播、封禁处罚

南方都市报
2026-10-27 00:09:23
维C是柠檬的3倍!浙江大学研究:这种水果富含抗氧化成分,还能调节肠道菌群!

维C是柠檬的3倍!浙江大学研究:这种水果富含抗氧化成分,还能调节肠道菌群!

肠菌科普
2026-10-29 07:05:14
沙明梅开二度,U15世界杯中国队3-2逆转战胜刚果(布)

沙明梅开二度,U15世界杯中国队3-2逆转战胜刚果(布)

懂球帝
2026-10-29 01:12:07
以色列大选落幕,内塔尼亚胡没想到,将面临三大深层变局

以色列大选落幕,内塔尼亚胡没想到,将面临三大深层变局

兵国大事
2026-10-28 15:54:32
Shams:状元秀AJ-迪班萨将在今日迎来个人NBA生涯首秀

Shams:状元秀AJ-迪班萨将在今日迎来个人NBA生涯首秀

北青网-北京青年报
2026-10-29 07:52:02
妻子因为要15万备孕金被丈夫骂,要起诉离婚,网友不解:备孕为什么要15万?

妻子因为要15万备孕金被丈夫骂,要起诉离婚,网友不解:备孕为什么要15万?

丫头舫
2026-10-27 23:44:22
姆巴佩风波之后,我们为什么要重新认识教员?

姆巴佩风波之后,我们为什么要重新认识教员?

知本设
2026-10-29 08:00:16
1993年,检察院书记员陈志伟,一枪崩了19岁女孩,4个月后竟成了国家干部,一条人命硬被捂了25年

1993年,检察院书记员陈志伟,一枪崩了19岁女孩,4个月后竟成了国家干部,一条人命硬被捂了25年

扶苏聊历史
2026-10-27 17:20:26
2026-10-29 09:40:49
AI前线 incentive-icons
AI前线
面向AI爱好者、开发者和科学家,提供AI领域技术资讯。
1782文章数 175关注度
往期回顾 全部

数码要闻

苹果发布首款触屏MacBook Pro: 22999元起 配PROLED XDR显示屏

头条要闻

印度陆军否认"中国车辆进入印度领土" 印度网友吵翻了

头条要闻

印度陆军否认"中国车辆进入印度领土" 印度网友吵翻了

体育要闻

0胜4负与篮网国王一桌 热火字母哥赌错了?

娱乐要闻

巾帼不让须眉!章子怡拿下重磅荣誉

财经要闻

美联储12月政策路径再添悬念

科技要闻

MacBook终于能触屏了:22999元起

汽车要闻

首销期权益价23.98万起 2026款理想i6上市

态度原创

亲子
时尚
数码
家居
军事航空

亲子要闻

我们家西蒙,从小就主打一个反套路…

柔情万种的针织裙,开叉的更显瘦!

数码要闻

RTX 5080涨成RTX 5090首发价!零售价突破1.3万元:第三方加价无上限

家居要闻

2026建博会(广州) 公装联探展交流活动

军事要闻

万斯致信伊朗安全高官试图重启谈判

无障碍浏览 进入关怀版