网易首页 > 网易号 > 正文 申请入驻

AI在物理考试只拿30分?耶鲁学者查完卷子发现错的是题

0
分享至

如果只看那些专门为物理难题设计的测试,AI的成绩单相当难看——六套不同的评测,最差的时候只有30%的得分。这个数字流传开来,几乎坐实了一种印象:AI能写代码、能算数学,但一碰到真正的物理问题就露怯。


耶鲁大学的John Sous觉得,这个印象可能来得不太公平。他和同事在实际使用这些模型时,看到的成功案例和测试分数对不上。于是他们回过头去,把那些评测题目一道道重新检查了一遍。

结果发现问题不在AI身上。那些题目里藏着一连串错误,还有不少定义含糊、信息缺失的地方。把题目本身修好之后,同一批模型的得分一路升到了94%。Sous的说法很直接:不是AI答不出来,是卷子没把必要的信息给全。

“我认为任何定义清晰的东西,哪怕它非常难,我怀疑AI都会做得很好——可以说比最好的专家还好,”Sous说,“我们的数据支持这一点。”

这句话里藏着一个前提:定义清晰。物理学的麻烦恰恰在于,它并不总是定义清晰。

物理学家Vladimir Arnold说过一句被反复引用的话:数学是物理学中实验成本低廉的那一部分。换句话说,物理里那些能被写成方程、能被严格检验的部分,确实和数学很像,AI在这里如鱼得水。但物理还有另一面——那些新出现的、尚未开垦的、模糊的、处在最前沿的部分。

Sous描述了他眼中真正有意思的物理是什么样子:当我们在自然界观察到某种令人困惑的现象,一块材料、一片宇宙,我们还不理解它,这时候物理学家的工作是造出一个模型、一个近似、一个模拟,去抓住并预测这个现象。

“那是一个非常艺术、非常有创造性的过程,”他说,“AI真的能迈出下一步,完成理论物理学家的全部工作吗?做端到端的研究:定义、创造、探索、检验?目前图景还不清楚。”

数学之所以跑在AI进展的最前面,有一个技术上的原因:形式化。这种方法把一个数学想法翻译成可以被逐条检查的计算机代码,过程足够彻底,以至于一个定理如果能完好无损地通过检验,就被认为正确得无可置疑。它让AI在处理问题时,能知道自己什么时候得到了正确答案。

用形式化来检验物理,也有了一些进展,但和数学比起来还处在早期。物理问题往往更杂乱,更难被钉死。

不过,AI已经在被物理学家使用了。不只是写代码、做数学,甚至包括设计和运行实验。同样在耶鲁大学的Logan Wright正在开一门课,讲如何在物理研究中使用AI,他说课程大纲一直在改,为了追上进展。

Wright认为关键在于:造出输入和输出都能被计算机控制的实验。控制权交出去之后,AI就能拉动相应的操纵杆,去探索问题空间,得到有意义的结果。

“它没有手,没有眼睛,它只通过语言和代码与世界互动,”Wright说,“所以如果我们能建立一个实验,其中所有观察都被还原成代码,所有动作都被还原成代码……那么AI实际上能帮上很大的忙。”

他实验室里正在进行的一个实验,是分析不同形状的激光脉冲如何影响一个铷原子。研究人员用Anthropic的AI Claude来控制激光脉冲,并收集它们产生的效果数据。

“Claude现在基本上能说‘我认为这个激光脉冲会产生这个输出’,”Wright说,“然后它能去检验这一点。”

这类实验可以整夜运行,完成的工作量相当于人类一周的量。人类物理学家甚至可以用手机上的应用,在离开实验室的时候把突然想到的点子提出来,回来时直接看结果。

“并不是整个宇宙都能用这种方式探索。它会局限在非常受限的领域里,”Wright说,“我认为物理学下一个前沿的一部分,就是在这些领域里尽可能多地取得进展。”

Wright还提到一种已经完全可以想象的情形:AI很快会设计出一个人类不理解的实验,让人类把它造出来,然后产生令人兴奋的新结果。但他紧接着补了一句,这句话值得原样保留——“但要说清楚,就像数学里一样,存在一场争论:如果我们得到一个结果,却对它一无所知,那它算不算科学。”

这个问题目前没有答案。它悬在那里,和那个从30%跳到94%的分数一样,提醒着人们:在讨论AI能不能做物理之前,也许得先想清楚,我们到底在拿什么标准考它。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“小时候很多东西根本没人教”,网友:我等这个帖子等了25年

“小时候很多东西根本没人教”,网友:我等这个帖子等了25年

夜深爱杂谈
2026-10-17 19:13:29
硬刚张继科!刘丁硕自曝曾得抑郁症:想结束 输给樊振东是最高光时刻

硬刚张继科!刘丁硕自曝曾得抑郁症:想结束 输给樊振东是最高光时刻

念洲
2026-10-18 07:09:46
广厦双加时逆转山西:塔克44+12+9 孙铭徽29分胡金秋21+12

广厦双加时逆转山西:塔克44+12+9 孙铭徽29分胡金秋21+12

醉卧浮生
2026-10-17 22:14:15
一个远比贪腐更危险的现象,人人闭嘴不谈,正在危害中华民族

一个远比贪腐更危险的现象,人人闭嘴不谈,正在危害中华民族

梦在深巷aqa
2026-10-17 05:48:42
越来越多人得癌症,医生提醒:洗碗时几个坏习惯,你占了几个?

越来越多人得癌症,医生提醒:洗碗时几个坏习惯,你占了几个?

健康科普365
2026-10-13 11:35:07
美国死刑直播,为何全世界哭的最大声的是中国法学界?

美国死刑直播,为何全世界哭的最大声的是中国法学界?

步论天下事
2026-10-15 10:25:45
轰29分6助,5记三分!球迷:郭士强快将他召进中国男篮

轰29分6助,5记三分!球迷:郭士强快将他召进中国男篮

体育哲人
2026-10-18 08:15:59
A股:不必再等明天开盘了,趋势已经明朗,明后两天行情没有任何意外了

A股:不必再等明天开盘了,趋势已经明朗,明后两天行情没有任何意外了

财经大拿
2026-10-18 06:05:12
毛主席原配:18岁嫁给14岁毛主席,建国后主席亲自为她破例!

毛主席原配:18岁嫁给14岁毛主席,建国后主席亲自为她破例!

春秋砚
2026-10-18 10:55:12
交1000元灵活就业社保,仅400元入个人账户

交1000元灵活就业社保,仅400元入个人账户

城事堂
2026-10-17 09:09:08
台湾省还有多少个蔡康永?吴宗宪说了实话:艺人只赚钱不该表态

台湾省还有多少个蔡康永?吴宗宪说了实话:艺人只赚钱不该表态

世界地缘档案
2026-10-17 14:29:55
汽油消费已经开始下降,中石油与中石化为何还要大举扩建加油站?

汽油消费已经开始下降,中石油与中石化为何还要大举扩建加油站?

云居历史
2026-10-18 10:41:47
周鹏出征仪式全程没理杜锋,降薪百万回来,不是来演和气的

周鹏出征仪式全程没理杜锋,降薪百万回来,不是来演和气的

衔春信
2026-10-17 05:59:07
原来早已不是中国籍?事业巅峰远赴美国,被老外“玩腻”晚年回国

原来早已不是中国籍?事业巅峰远赴美国,被老外“玩腻”晚年回国

80后房车生活
2026-10-03 16:22:09
2-5!73岁名帅麻了:生涯29次输给巴萨+史上第1人 炮轰裁判太黑了

2-5!73岁名帅麻了:生涯29次输给巴萨+史上第1人 炮轰裁判太黑了

风过乡
2026-10-18 07:46:26
真正的贱卖,旺达以人民币约88元的价格出售伊卡尔迪球衣

真正的贱卖,旺达以人民币约88元的价格出售伊卡尔迪球衣

懂球帝
2026-10-18 00:32:32
欧盟峰会变讨债现场?泽连斯基索要700亿援款,欧洲各国撕破脸

欧盟峰会变讨债现场?泽连斯基索要700亿援款,欧洲各国撕破脸

探源历史
2026-10-18 02:51:33
冯远征苦恼招不到一米六几的女演员和一米七几的男演员,吐槽“现在艺术院校招不到黄胖子,大家都去招高富帅了”

冯远征苦恼招不到一米六几的女演员和一米七几的男演员,吐槽“现在艺术院校招不到黄胖子,大家都去招高富帅了”

韩小娱
2026-10-17 14:40:49
炸锅!特朗普放狠话:不改名就是敌人!头号亲信高市早苗硬刚违抗

炸锅!特朗普放狠话:不改名就是敌人!头号亲信高市早苗硬刚违抗

旧史新谭
2026-10-16 23:03:43
林徽因落选的国徽方案,网友看后感叹:审美确实一绝,但真不合适

林徽因落选的国徽方案,网友看后感叹:审美确实一绝,但真不合适

兴趣知识
2026-07-04 01:34:41
2026-10-18 12:03:00
宇宙来信2
宇宙来信2
有态度网友ytd
14文章数 20关注度
往期回顾 全部

科技要闻

王江舟院士:6G到底是不是骗局 是不是收割

头条要闻

00后女演员被传与郭麒麟结婚 曾出演电视剧《赘婿》

头条要闻

00后女演员被传与郭麒麟结婚 曾出演电视剧《赘婿》

体育要闻

升级版杨瀚森再闯难关:当上开拓者第三中锋还得拼

娱乐要闻

曝郭麒麟与25岁知名女星已经结婚,女方回应关系

财经要闻

马斯克:美债问题只能靠AI和机器人解决

汽车要闻

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

家居
亲子
健康
教育
时尚

家居要闻

2026建博会(广州) 公装联探展交流活动

亲子要闻

香港一幼儿园招不到娃,老师扮王子公主走秀拍片拉生源!网友:看着心酸又想笑

看着很健康的人,怎么会突然猝死?

教育要闻

我都怀疑人生了,这道题有什么玄机么?

伊姐周六热推:电视剧《喜剧之王》;电视剧《把黑夜点燃》......

无障碍浏览 进入关怀版