网易首页 > 网易号 > 正文 申请入驻

AI考卷被刷穿,下一关居然要考发明

0
分享至

刚刚过去的这几天,科技圈最热闹的话题,莫过于一群"出题人"被逼着连夜改写考卷了。

这份考卷,叫ARC-AGI,是业界公认最能检验AI"是不是真的聪明"的一套测试。它考的既不是背题,也不是算数,而是让AI面对从没见过的小图形,现场猜出规律、举一反三。过去几年,别说考满分,很多顶尖模型连及格都费劲。

可一切在9月3号那天变了。

一觉醒来,AI从"半瓶水"考到"天花板"

OpenAI在9月3日发布了新一代旗舰模型GPT-6 Astra。它在ARC-AGI-3这套半私有测试集上,一口气拿到了99.9%的成绩。用OpenAI内部的话说,模型在这个维度上已经"完全饱和"了。


这个数字意味着什么?放到更早的版本里看就很直观——同一类测试,此前很多模型的成绩还是个位数。从"几乎不会"到"接近满分",这种跳跃被不少人形容成跨越式巨变,而不是普通的进步。


OpenAI联合创始人兼总裁格雷格·布罗克曼随即公开喊话:"欢迎来到AGI时代"。英伟达CEO黄仁勋也跳出来,抢先替行业宣布"AGI已经到来"。

一时间,"AGI实现了"的呼声铺天盖地。

掌声背后,藏着两个扎心的细节

不过,狂欢之余,有心人很快发现了两个疑点。

第一个疑点是分数本身。99.9%听着吓人,可它是在OpenAI定制的测试环境下跑出来的。一旦换成ARC Prize官方那套中立的统一接口,同一个模型、同一批题,成绩直接掉到62.7%,差了37个百分点。也就是说,换个考场,这份"满分答卷"立马打了六折。


第二个疑点更有意思。就在几天前,OpenAI首席执行官山姆·奥尔特曼还公开表示,AGI本质上就是个"营销术语"。同一个公司,一边说AGI是营销话术,一边高调宣布进入AGI时代,这让围观群众多少有点错愕。


更耐人寻味的是,黄仁勋的高调宣布也被不少分析视为醉翁之意不在酒——有人指出,这背后藏着推动算力需求、铺垫未来数十万颗GPU销量的现实考量。

出题人坐不住了:考卷得重做

平心而论,不管各方怎么吵,99.9%的成绩确实把AI的"刷题"能力推到了一个新的高度。而这就直接逼出了另一个尴尬问题:考卷,可能出不下去了。

因为ARC这套题原本的设计思路,就是靠"让AI面对从未见过的难题"来拉开人机差距。结果AI把分数刷到接近满分,原来的题海对模型来说已经失去了筛选意义。ARC Prize方面的原定测试方案,也随之被全盘作废,需要重新拟题。


就在今天(9月16日),ARC Prize创始人弗朗索瓦·肖莱正式披露了下一代评测蓝图:

ARC-AGI-4确认将在明年第一季度如期登场,方向聚焦更长时间尺度下的"持续学习";

而真正被称作"人类最后考卷"的ARC-AGI-5,已经全面提上日程。

下一关,考发明

这版"人类最后考卷"考什么?答案是:发明。

按目前的规划,ARC-AGI-5瞄准的"发明",很可能是想提前找到一道更难被刷穿的考题——它不再只是让AI解别人出的题,而是要让AI走出预设的解法套路,去创造出能被验证、能被反复使用的新东西。

换句话说,过去考的是"解题能力",下一关可能要考"造物能力"了。

这个方向看起来确实比单纯刷分难上不少。但问题也随之而来:这道"发明题"能守住多久,谁都说不准。

"考无可考",或许已不是玩笑

回过头看,围绕AGI的争论其实从未停歇。模型公司在晒跑分时闭口不谈定义,芯片巨头忙着宣布"时代到来",评测机构则死守"必须在标准条件下解题才算数"的底线,还有大厂按合同条款各算各的。各方口中的AGI,各说各话,至今没有一个公认的统一标准。

而当AI连"发明"这种开放性考题都要被拿来验证,甚至可能再次被超越时,那句曾经带着玩笑意味的"考无可考",恐怕就要从感慨变成AGI讨论里绕不开的真问题了。

AI还在加速狂奔。只是不知道,下一次面对新考卷的,到底会是谁先交卷——是模型,还是已经快出不动题的我们。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
广东大胜广厦获首胜:弗格16+7+9崔永熙16分 塔克34+5+6

广东大胜广厦获首胜:弗格16+7+9崔永熙16分 塔克34+5+6

醉卧浮生
2026-10-22 21:30:10
搜狐市值只剩3.5亿美元,可公司账上却有12亿现金,张朝阳宁可错过短视频等风口,也不多花每一分钱

搜狐市值只剩3.5亿美元,可公司账上却有12亿现金,张朝阳宁可错过短视频等风口,也不多花每一分钱

新浪财经
2026-10-13 21:44:48
李小龙当年在武术界威名远扬,妻子琳达却在晚年自传里写道:李小龙曾对我坦言,世上存在一类对手能让他发自内心感到忌惮

李小龙当年在武术界威名远扬,妻子琳达却在晚年自传里写道:李小龙曾对我坦言,世上存在一类对手能让他发自内心感到忌惮

磊子讲史
2026-10-10 18:52:12
中期选举“大限将至”,特朗普急求俄罗斯:奉上乌克兰小命一条

中期选举“大限将至”,特朗普急求俄罗斯:奉上乌克兰小命一条

News脑洞
2026-10-22 17:09:16
首秀就疯!45分7板6助,改写31年历史纪录,灰熊922万捡到宝

首秀就疯!45分7板6助,改写31年历史纪录,灰熊922万捡到宝

大西体育
2026-10-22 11:03:26
2026 年的养老金涨幅,为什么还憋着不出?

2026 年的养老金涨幅,为什么还憋着不出?

大何日拱一卒
2026-10-22 15:24:29
谈判结束,乌克兰作出重大让步,普京感谢特朗普,英法德意选边站

谈判结束,乌克兰作出重大让步,普京感谢特朗普,英法德意选边站

阿腩讲娱乐
2026-10-22 07:41:13
羡慕哭了!宝马裁员8000人,离职补偿金最高达487万元!员工争着离职挤崩系统

羡慕哭了!宝马裁员8000人,离职补偿金最高达487万元!员工争着离职挤崩系统

聊斋新志
2026-10-22 19:28:15
恩断义绝!朝鲜发生大变化,金与正做出一个前所未有表态

恩断义绝!朝鲜发生大变化,金与正做出一个前所未有表态

张嘴说财经
2026-10-21 19:36:57
劝告全体国人快点清醒,务请提早做足思想准备,由于国防部早已道出了实底。日本这几年加军费,不是小修小补

劝告全体国人快点清醒,务请提早做足思想准备,由于国防部早已道出了实底。日本这几年加军费,不是小修小补

扶苏聊历史
2026-10-22 10:28:32
曝女星红毯赖着不出场,周涛张小斐无奈救场,晚宴全程无人搭理她

曝女星红毯赖着不出场,周涛张小斐无奈救场,晚宴全程无人搭理她

娱圈办事处
2026-10-22 13:46:04
12分钟、18楼、2岁男童坠亡:遛狗为什么不带着孩子?

12分钟、18楼、2岁男童坠亡:遛狗为什么不带着孩子?

新民周刊
2026-10-22 16:21:28
广东首胜夜一人最尴尬!赢18分的局在场输7分,粤蜜:不想打就走

广东首胜夜一人最尴尬!赢18分的局在场输7分,粤蜜:不想打就走

弄月公子
2026-10-22 22:08:18
江青机要秘书杨银禄晚年坦言:不管外界怎么说,有件事我一直感谢江青,做人讲求实在

江青机要秘书杨银禄晚年坦言:不管外界怎么说,有件事我一直感谢江青,做人讲求实在

磊子讲史
2026-10-22 16:54:01
妻子约男网友宾馆缠绵,事后男网友要收钱,2012年她拒付嫖资被分尸了

妻子约男网友宾馆缠绵,事后男网友要收钱,2012年她拒付嫖资被分尸了

汉史趣闻
2026-10-22 14:58:02
台媒曾抛出惊人统一方案:废弃"中华民国",改建"中国台湾邦"

台媒曾抛出惊人统一方案:废弃"中华民国",改建"中国台湾邦"

淡淡稻花香s
2026-10-22 10:48:15
一日本高管防火期硬闯禁区偷钓极危鱼类,开的日产车烧毁了蒙古八成保护区

一日本高管防火期硬闯禁区偷钓极危鱼类,开的日产车烧毁了蒙古八成保护区

老郭在学习
2026-10-21 15:32:12
俄乌冲突,事情正在起变化 | 京酿馆

俄乌冲突,事情正在起变化 | 京酿馆

新京报
2026-10-22 13:35:23
消息称华为获150亿元离岸贷款:自2020年以来首次获得离岸银团贷款

消息称华为获150亿元离岸贷款:自2020年以来首次获得离岸银团贷款

IT之家
2026-10-22 21:08:13
离谱!顺风车司机犯困,让乘客自己开车,两个多小时路程乘客开了一个半小时,车费还要全额收;平台:属于车主违规行为,车费全额退还

离谱!顺风车司机犯困,让乘客自己开车,两个多小时路程乘客开了一个半小时,车费还要全额收;平台:属于车主违规行为,车费全额退还

扬子晚报
2026-10-22 12:47:11
2026-10-23 01:52:49
中科智媒
中科智媒
聚焦新闻前沿,每日热点速递
1056文章数 11819关注度
往期回顾 全部

科技要闻

腾讯云谷歌紧急行动!互联网安全出大事

头条要闻

西藏7.0级地震亲历者:房子震得嘎嘎叫 不敢回家

头条要闻

西藏7.0级地震亲历者:房子震得嘎嘎叫 不敢回家

体育要闻

卢卡:伦德伯格,欢迎来到NBA

娱乐要闻

芭莎盛典,张小斐因救场实现口碑暴涨

财经要闻

宁德,跌成了一只红利股?

汽车要闻

搭城市NOA/续航555KM 捷达M6上市售7.98万起

态度原创

本地
艺术
家居
健康
手机

本地新闻

一场垂直登高赛跑出了"山城"的真正内核

艺术要闻

20幅 叶夫根尼·戈洛洛博夫 风景油画选二

家居要闻

2026建博会(广州) 公装联探展交流活动

痘痘能根治吗?皮肤科医生说实话

手机要闻

荣耀手表Fit 6现身官网:1.97英寸AMOLED全面屏、适配iOS /鸿蒙设备,支持腕上微信

无障碍浏览 进入关怀版