网易首页 > 网易号 > 正文 申请入驻

AI在物理考试只拿30分?耶鲁学者查完卷子发现错的是题

0
分享至

如果只看那些专门为物理难题设计的测试,AI的成绩单相当难看——六套不同的评测,最差的时候只有30%的得分。这个数字流传开来,几乎坐实了一种印象:AI能写代码、能算数学,但一碰到真正的物理问题就露怯。


耶鲁大学的John Sous觉得,这个印象可能来得不太公平。他和同事在实际使用这些模型时,看到的成功案例和测试分数对不上。于是他们回过头去,把那些评测题目一道道重新检查了一遍。

结果发现问题不在AI身上。那些题目里藏着一连串错误,还有不少定义含糊、信息缺失的地方。把题目本身修好之后,同一批模型的得分一路升到了94%。Sous的说法很直接:不是AI答不出来,是卷子没把必要的信息给全。

“我认为任何定义清晰的东西,哪怕它非常难,我怀疑AI都会做得很好——可以说比最好的专家还好,”Sous说,“我们的数据支持这一点。”

这句话里藏着一个前提:定义清晰。物理学的麻烦恰恰在于,它并不总是定义清晰。

物理学家Vladimir Arnold说过一句被反复引用的话:数学是物理学中实验成本低廉的那一部分。换句话说,物理里那些能被写成方程、能被严格检验的部分,确实和数学很像,AI在这里如鱼得水。但物理还有另一面——那些新出现的、尚未开垦的、模糊的、处在最前沿的部分。

Sous描述了他眼中真正有意思的物理是什么样子:当我们在自然界观察到某种令人困惑的现象,一块材料、一片宇宙,我们还不理解它,这时候物理学家的工作是造出一个模型、一个近似、一个模拟,去抓住并预测这个现象。

“那是一个非常艺术、非常有创造性的过程,”他说,“AI真的能迈出下一步,完成理论物理学家的全部工作吗?做端到端的研究:定义、创造、探索、检验?目前图景还不清楚。”

数学之所以跑在AI进展的最前面,有一个技术上的原因:形式化。这种方法把一个数学想法翻译成可以被逐条检查的计算机代码,过程足够彻底,以至于一个定理如果能完好无损地通过检验,就被认为正确得无可置疑。它让AI在处理问题时,能知道自己什么时候得到了正确答案。

用形式化来检验物理,也有了一些进展,但和数学比起来还处在早期。物理问题往往更杂乱,更难被钉死。

不过,AI已经在被物理学家使用了。不只是写代码、做数学,甚至包括设计和运行实验。同样在耶鲁大学的Logan Wright正在开一门课,讲如何在物理研究中使用AI,他说课程大纲一直在改,为了追上进展。

Wright认为关键在于:造出输入和输出都能被计算机控制的实验。控制权交出去之后,AI就能拉动相应的操纵杆,去探索问题空间,得到有意义的结果。

“它没有手,没有眼睛,它只通过语言和代码与世界互动,”Wright说,“所以如果我们能建立一个实验,其中所有观察都被还原成代码,所有动作都被还原成代码……那么AI实际上能帮上很大的忙。”

他实验室里正在进行的一个实验,是分析不同形状的激光脉冲如何影响一个铷原子。研究人员用Anthropic的AI Claude来控制激光脉冲,并收集它们产生的效果数据。

“Claude现在基本上能说‘我认为这个激光脉冲会产生这个输出’,”Wright说,“然后它能去检验这一点。”

这类实验可以整夜运行,完成的工作量相当于人类一周的量。人类物理学家甚至可以用手机上的应用,在离开实验室的时候把突然想到的点子提出来,回来时直接看结果。

“并不是整个宇宙都能用这种方式探索。它会局限在非常受限的领域里,”Wright说,“我认为物理学下一个前沿的一部分,就是在这些领域里尽可能多地取得进展。”

Wright还提到一种已经完全可以想象的情形:AI很快会设计出一个人类不理解的实验,让人类把它造出来,然后产生令人兴奋的新结果。但他紧接着补了一句,这句话值得原样保留——“但要说清楚,就像数学里一样,存在一场争论:如果我们得到一个结果,却对它一无所知,那它算不算科学。”

这个问题目前没有答案。它悬在那里,和那个从30%跳到94%的分数一样,提醒着人们:在讨论AI能不能做物理之前,也许得先想清楚,我们到底在拿什么标准考它。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
普京已明确表示:俄罗斯已接管法国、德国、瑞典、比利时等欧洲四国企业在俄罗斯的资产,作为欧盟支持乌克兰直接参与战场敌对行动的回应

普京已明确表示:俄罗斯已接管法国、德国、瑞典、比利时等欧洲四国企业在俄罗斯的资产,作为欧盟支持乌克兰直接参与战场敌对行动的回应

吉刻新闻
2026-10-17 16:15:36
地位彻底变了!29岁樊振东低调回国仅24小时,再次官宣新身份!国乒2大信号藏不住了!球迷:终于等到这一天

地位彻底变了!29岁樊振东低调回国仅24小时,再次官宣新身份!国乒2大信号藏不住了!球迷:终于等到这一天

锐评利物浦
2026-10-17 21:05:38
4分钟2球!39岁梅西表演凌波微步:50米奔袭2变向 2次穿裆戏耍后卫

4分钟2球!39岁梅西表演凌波微步:50米奔袭2变向 2次穿裆戏耍后卫

风过乡
2026-10-18 09:32:20
1950年地主傅德辉家意外搜出一张旧欠条,落款人写着朱德

1950年地主傅德辉家意外搜出一张旧欠条,落款人写着朱德

磊子讲史
2026-05-26 16:31:46
未来可期!14岁李昊炎巴萨生涯首次戴帽:半场3球 连轰世界波

未来可期!14岁李昊炎巴萨生涯首次戴帽:半场3球 连轰世界波

念洲
2026-10-18 06:54:03
湖北推出“社银贷”帮困难群众贷款交社保

湖北推出“社银贷”帮困难群众贷款交社保

名人苟或
2026-10-18 07:02:18
悲催!一对孟加拉夫妇被砍头,在沙特阿拉伯清真寺内实施“不道德行为”,相关视频在网络传播

悲催!一对孟加拉夫妇被砍头,在沙特阿拉伯清真寺内实施“不道德行为”,相关视频在网络传播

火山詩话
2026-10-18 06:42:43
刷到网红四哥,真是让人哭笑不得,演了两年50亿富豪,连续4个月吃老坛酸菜面

刷到网红四哥,真是让人哭笑不得,演了两年50亿富豪,连续4个月吃老坛酸菜面

喜欢历史的阿繁
2026-10-18 01:39:26
从新能源车销量看中国能源转型的世界启示

从新能源车销量看中国能源转型的世界启示

齐鲁壹点
2026-10-17 21:14:44
马斯克公开表示:美国总统特朗普、国会两院乃至司法系统,都缺乏真正削减政府支出的意愿,美国国债问题的唯一解决办法是用AI和机器人

马斯克公开表示:美国总统特朗普、国会两院乃至司法系统,都缺乏真正削减政府支出的意愿,美国国债问题的唯一解决办法是用AI和机器人

吉刻新闻
2026-10-18 10:43:09
突发!江苏一工程设计集团发布结业通知:11月1日停产解散,承诺结清工资与补偿金

突发!江苏一工程设计集团发布结业通知:11月1日停产解散,承诺结清工资与补偿金

火山詩话
2026-10-18 06:21:59
亚马尔传射+造红,金球先生处子球,巴萨5-2贝蒂斯11连胜创纪录

亚马尔传射+造红,金球先生处子球,巴萨5-2贝蒂斯11连胜创纪录

钉钉陌上花开
2026-10-18 02:35:16
莫大课堂披旭日旗事件后续:在俄中国留学生集体请愿,校方当天就决定遣返

莫大课堂披旭日旗事件后续:在俄中国留学生集体请愿,校方当天就决定遣返

小徐讲八卦
2026-10-18 07:58:24
重磅!教育部要求辅导员与学生“同吃同住同生活”:政策想让辅导员“住进学生心里”,可住得近就等于心更近吗?

重磅!教育部要求辅导员与学生“同吃同住同生活”:政策想让辅导员“住进学生心里”,可住得近就等于心更近吗?

学术眺望
2026-10-17 21:40:03
“生平没碰过女孩”,万米高空自杀式袭击揭秘

“生平没碰过女孩”,万米高空自杀式袭击揭秘

中国新闻周刊
2026-10-17 23:24:03
袁腾飞事件的启示,理性看待中外差距,不妄自菲薄也不盲目吹捧

袁腾飞事件的启示,理性看待中外差距,不妄自菲薄也不盲目吹捧

完善法
2026-10-17 04:07:49
为特朗普清道,为普京安排骑行,为黄仁勋等嘉宾腾出深南大道:深圳APEC会议周,整座城市进入“高级礼宾待客状态”

为特朗普清道,为普京安排骑行,为黄仁勋等嘉宾腾出深南大道:深圳APEC会议周,整座城市进入“高级礼宾待客状态”

谈史论今1
2026-10-17 17:07:50
垃圾!中国留学生披日本旭日旗,引发全网震怒!

垃圾!中国留学生披日本旭日旗,引发全网震怒!

News脑洞
2026-10-17 19:22:14
小伙空调开18℃睡得太死,家人呼叫没回应 ,一摸手臂心都凉了,全家人哭得撕心裂肺,赶紧联系殡葬事宜,众人悲痛不已时,小伙醒了

小伙空调开18℃睡得太死,家人呼叫没回应 ,一摸手臂心都凉了,全家人哭得撕心裂肺,赶紧联系殡葬事宜,众人悲痛不已时,小伙醒了

蓬勃新闻
2026-10-17 08:00:22
曾向全国人大建议废除寻衅滋事罪的于凯律师,又就“大病免费医疗”提交建议书

曾向全国人大建议废除寻衅滋事罪的于凯律师,又就“大病免费医疗”提交建议书

老镡讲故事
2026-10-18 08:08:36
2026-10-18 12:59:00
宇宙来信2
宇宙来信2
有态度网友ytd
14文章数 20关注度
往期回顾 全部

科技要闻

王江舟院士:6G到底是不是骗局 是不是收割

头条要闻

男子100多万买的车3年修几十次 最严重时高速直接熄火

头条要闻

男子100多万买的车3年修几十次 最严重时高速直接熄火

体育要闻

升级版杨瀚森再闯难关:当上开拓者第三中锋还得拼

娱乐要闻

曝郭麒麟与25岁知名女星已经结婚,女方回应关系

财经要闻

马斯克:美债问题只能靠AI和机器人解决

汽车要闻

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

艺术
手机
亲子
教育
数码

艺术要闻

14位国外画家的风景油画

手机要闻

DOOGEE Note60 W系列手机亮相:6.38英寸90Hz阔面屏设计,撞脸华为Pura X View

亲子要闻

孩子拇指与众不同会敏感自卑,术后锻炼与心理疏导缺一不可

教育要闻

“只筛选,不教育”,一线教师评价英语新教材,家长:已经想放弃英语了!

数码要闻

联想P7 AI主机1024开启预约:此芯P1 SoC + 后摩M50 dNPU方案

无障碍浏览 进入关怀版