网易首页 > 网易号 > 正文 申请入驻

陷于“虚构信息”的泥沼

0
分享至

北京大学 徐仁新 编译自 Nicole Sharp. Physics World,2026,(9):8

本文选自《物理》2026年第10期

在人工智能时代的今天,我们比以往任何时候更需要学术技能。

2008年,美国作家斯蒂芬森出版了科幻小说“Anathem” (译者注:中译名《飞越修道院》、《失落的星阵》等)。故事发生在假想的“Arbre”类地行星上,涉及一群不同等级修行的僧侣,他们大多与世隔绝,但偶尔会开放接受外界信息。

书中,斯蒂芬森探讨了互联网的“黑暗时代”。那时,公司让网络涌入大量“看似合理其实虚假”的信息,以此迫使消费者购买本公司开发的工具来鉴别真伪。

正如斯蒂芬森所言,这种“胡扯”起初由人完成,但最终这一过程由所谓的“Artificial Inanity” (人工废话)运行,它可为每个合法文件创建成百上千个虚假版本(bogons,即“虚构信息”)。


机器的崛起。由大语言模型驱动的聊天机器人使得搜索结果和社媒信息泛滥

今天,我们正面临斯蒂芬森的“黑暗时代”。我们获取的信息中越来越多地充斥着人工智能(AI)垃圾,远不止AI生成的离奇小猫视频以及政客和名人的古怪举止。

随着大语言模型(LLM)驱动的聊天机器人的兴起,我们的搜索、社媒甚至学术期刊都被污染了。乍一看,这些数据有用且合理,但在其华丽表象背后却没有任何价值。

作为科学家,我们必须将自身工作与近期的其他研究联系起来。然而,当我们不得不从虚构成果中分辨出真实时,这项任务变得愈发艰难。随着大语言模型生成的劣质内容侵蚀我们此前信赖的知识库,我们正面临着一个迅速恶化的信息环境。

以前可以将一个想法追溯到人类作者(对学术不端承担后果)的论文;但未来,除评估科学价值外,我们还必须质疑文章的作者、机构或实验是否真实存在。

这并非杞人忧天。2024年,哥德堡大学医学研究团队虚构了一种名为“bixonimania”的疾病,并通过Medium 平台上的帖子和两篇预印本论文进行宣传。团队旨在测试AI聊天机器人是否会捕捉和传播虚假疾病信息,结果却得到肯定答案。值得一提的是,团队插入的若干信息已明确表明这一研究造假,如致谢“星际舰队学院”的一位同事、感谢“魔戒联盟大学”的资助,甚至在文章一开头就写道“整篇论文胡编乱造”。

困于沼泽


物理学家也不能幸免信息糟粕的危害。大量LLM生成的文章迫使预印本库arXiv今年5月宣布对“基于LLM生成”论文的作者的惩罚,包括引用“虚假参考文献”。措施包括:禁投arXiv一年,此后的手稿必须经过“信誉良好的同行评审”之后才能被接受。

我起初对这一举措表示欢迎。严重的后果将防范LLM的滥用,尤其是针对那些粗制滥造的投机行为。然而,我越想越不对劲,arXiv新的惩罚机制可能最终会落在那些不用LLM写论文的作者们身上。

抄近路是省事的。比如,你正在写一篇综述,你读过并信任论文A,考虑引用其中的一个要点,但你注意到该要点其实出现在论文B中(论文A只是引用)。很简单,直接滚动鼠标至参考文献,复制论文B并引用(相信我们中大多数都这么干过)。

但随着信息环境的恶化,这种捷径有可能让你违反arXiv等的新政策。看似有效的引文(甚至包含你熟悉的作者),也许根本就不存在。

研究也可能完全伪造。例如,一组研究人员在同行评审的文章中引用“bixonimania”预印本之一。期刊编辑不顾作者反对,撤回了该文。简单地复制粘贴引文而不进行检查,你可能会无意间被列入黑名单,你和合作者都将被禁用arXiv。

我并不认为arXiv有政策缺陷。相反,我觉得那些希望自己的写作不受AI影响的同行必须保持警惕。我们必须努力提升专业技能,包括科学判断、信息甄别、沟通技巧和严谨的学术态度。虽然AI公司声称LLM能够取而代之,我们还是应该致力于训练并传授这些技能。

在《飞越修道院》中,某位角色可以挥挥手离开那个充满虚构信息的互联网,而我们不可能这样解决问题。相反,随着信息环境的恶化,我们发现自己深陷泥沼。为了摆脱,我们必须认真计划下一步,不能想当然。看似可靠的途径,也可能被证明是危险的。安全前行是一个缓慢过程,在获得可信赖的方案和工具时,我们必须加倍努力推敲。

仅仅在写作时选择不用LLM已经不切实际了,我们必须依靠学术技能来分辨真伪。若想摆脱困境,所有人都必须放慢脚步。

欢迎订阅2026年《物理》杂志

《物理》是由中国科学院物理研究所和中国物理学会主办的权威物理类中文科普期刊,注重学科性与科普性相结合,秉承“轻松阅读,享受物理”的办刊理念,集学科大家之力,追踪物理学成果,服务物理学领域,促进学科交叉,让科学变得通俗易懂。已成为我国众多物理专业的大学生、研究生、物理学家案头常读的刊物之一。

(期刊订阅)

订阅方式:编辑部直接订阅优惠价240元/年,全国包邮。

方式1微信订阅

在“物理所财务处”微信公众号缴费,操作如下:公号下方“业务办理”-“订刊费”-收费部门“《物理》编辑部”,之后填写相应信息。如有问题,可添加编辑微信咨询:18627635857。

(注:仅针对需要对公开电子发票的读者,且务必提供正确的单位名称和单位税号)

方式2银行汇款

开户行:中国农业银行北京科院南路支行

户 名:中国科学院物理研究所

帐 号:11250101040005699

(注:请注明“《物理》编辑部”,汇款成功后请及时联系编辑部登记邮寄地址)

编辑部联系方式:

咨询电话:010-82649277;82649029

Email:physics@iphy.ac.cn

(赠阅活 动 )

为答谢广大读者长期以来的关爱和支持,《物理》编辑部特推出优惠订阅活动:凡直接向编辑部连续订阅2年《物理》杂志,将获赠《岁月有情- <物理> 50周年纪念本》。内有自1972年至2022年《物理》发表的50篇精选文章信息,扫描对应的二维码,可重温经典之作,感悟物理科学的真谛,领略学科大家的风采。希望读者们爱上《物理》!


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
戴耳机夺冠被举报?组委会回复一出,跑圈全沉默了…

戴耳机夺冠被举报?组委会回复一出,跑圈全沉默了…

小方说跑步
2026-10-30 17:09:56
断崖下滑!曼城绝对王牌彻底迷失!马雷斯卡险被坑惨

断崖下滑!曼城绝对王牌彻底迷失!马雷斯卡险被坑惨

奶盖熊本熊
2026-11-05 09:11:19
白宫发布提示:特朗普依然是总统,特朗普:如果民主党人掌控国会后发起弹劾我的行动,那将会“摧毁”民主党

白宫发布提示:特朗普依然是总统,特朗普:如果民主党人掌控国会后发起弹劾我的行动,那将会“摧毁”民主党

政知新媒体
2026-11-05 09:24:45
日本女优北岡果林与同学在迪士尼排队,突然被人大喊“那个人是拍片的”

日本女优北岡果林与同学在迪士尼排队,突然被人大喊“那个人是拍片的”

东京在线
2026-11-04 01:55:54
广东队直接起飞,总经理主教练外援全换,再收重大喜讯,徐杰稳了

广东队直接起飞,总经理主教练外援全换,再收重大喜讯,徐杰稳了

宗介说体育
2026-11-05 15:25:16
开国大典当天,毛主席为何下死命令禁止任弼时登城楼?原因简单

开国大典当天,毛主席为何下死命令禁止任弼时登城楼?原因简单

凡人侃史
2026-11-05 14:41:13
“三科满分,还考不上清华吗?”家长炫耀六年级学霸女儿,被打脸

“三科满分,还考不上清华吗?”家长炫耀六年级学霸女儿,被打脸

林林先生
2026-11-05 21:32:06
国内将逐渐停止“肠息肉手术”?做完人就废了?医生讲出实情

国内将逐渐停止“肠息肉手术”?做完人就废了?医生讲出实情

医学科普汇
2026-10-11 14:00:20
斯科拉里:C罗是我执教过最出色的球员之一,他做了正确决定

斯科拉里:C罗是我执教过最出色的球员之一,他做了正确决定

懂球帝
2026-11-05 23:21:26
张雪机车校招事件升级!媒体点评“年薪12至15万过于傲慢”引争议,网友站队张雪,追问主持人工资多少

张雪机车校招事件升级!媒体点评“年薪12至15万过于傲慢”引争议,网友站队张雪,追问主持人工资多少

火山詩话
2026-11-05 07:47:48
苹果AI体验一天后,聊聊个人使用感受!

苹果AI体验一天后,聊聊个人使用感受!

果粉之家
2026-11-05 14:08:31
赵子豪4-3战胜王楚钦,王楚钦丢拍离场!球拍,躺在地板上,像一具无声的遗骸

赵子豪4-3战胜王楚钦,王楚钦丢拍离场!球拍,躺在地板上,像一具无声的遗骸

开成运动会
2026-10-21 08:07:23
王楚钦0-3不敌温瑞博,一战爆出三大意外,两个现实值得正视

王楚钦0-3不敌温瑞博,一战爆出三大意外,两个现实值得正视

罗纳尔说个球
2026-11-06 02:38:40
一位获奖老师的含泪发言:别再用无效作业,透支孩子的童年,消耗整个家庭

一位获奖老师的含泪发言:别再用无效作业,透支孩子的童年,消耗整个家庭

青苹果sht
2026-11-01 05:35:06
A股:股民要做好准备,不出所料,明天,11月5日,估计要这样走

A股:股民要做好准备,不出所料,明天,11月5日,估计要这样走

风风顺
2026-11-06 01:35:04
北京女足彭雨潇:我们不只是为了自己,也是为张琳艳争取胜利

北京女足彭雨潇:我们不只是为了自己,也是为张琳艳争取胜利

懂球帝
2026-11-05 17:51:42
WTT法兰克福冠军赛男单太残酷:随着向鹏1-3,16强仅3名国乒选手

WTT法兰克福冠军赛男单太残酷:随着向鹏1-3,16强仅3名国乒选手

俯身冲顶
2026-11-05 22:45:11
媒体人:医生建议不要剧烈运动,但周琦依然将前往国家队报到

媒体人:医生建议不要剧烈运动,但周琦依然将前往国家队报到

懂球帝
2026-11-05 14:21:40
29分惨败!女篮两冠王惨遭爆冷:陈明伶6+4杨力维3分!

29分惨败!女篮两冠王惨遭爆冷:陈明伶6+4杨力维3分!

篮球快餐车
2026-11-06 06:19:49
红军26岁中场状态下滑!上赛季还是队内最佳 如今首发位置不保

红军26岁中场状态下滑!上赛季还是队内最佳 如今首发位置不保

球事百科吖
2026-11-06 06:40:04
2026-11-06 06:51:00
中国物理学会期刊网 incentive-icons
中国物理学会期刊网
最权威的物理学综合信息网站
4515文章数 21979关注度
往期回顾 全部

科技要闻

一手实测|国产三大Flash模型,谁更能打?

头条要闻

美股暴跌:英伟达跌超9% 特斯拉跌10.86%

头条要闻

美股暴跌:英伟达跌超9% 特斯拉跌10.86%

体育要闻

40岁,正是绝杀的年纪!

娱乐要闻

42岁的唐嫣,又上热搜了

财经要闻

市场能接受AI繁荣退潮吗?

汽车要闻

限时置换价15.98万元起 2027款领克08 EM-P上市

态度原创

房产
数码
亲子
艺术
军事航空

房产要闻

突发!海口新政:小户型回来了!

数码要闻

苹果首款触屏MacBook Pro正式开售,22999元起

亲子要闻

一图读懂丨睡眠管理之睡眠姿势

艺术要闻

一幅画就把光影玩明白了?威廉·施耐德这笔触,太美了!

军事要闻

特朗普称伊朗战事何时结束将由其决定

无障碍浏览 进入关怀版