网易首页 > 网易号 > 正文 申请入驻

AI也会「以讹传讹」?AI的「曼德拉效应」探索

0
分享至



一款根本不存在的智能手环,为什么会出现在 AI 的推荐名单里?2026 年央视 3・15 晚会曝光的 “AI 投毒” 案例,让这个问题引起了人们的关注:虚构商品被写进测评、排名和用户评价,随后被 AI 当作推荐依据。



如果 AI 还会相互交流、保存记忆、发布文章,最初的错误又会怎样发展?一项围绕多智能体社交网络的研究发现,虚假说法可能在持续互动中被普通智能体接受,逐渐形成群体共同接受的 “事实”,甚至在造假者停止活动后继续存在。

来自香港中文大学、爱丁堡大学、香港理工大学、同济大学和牛津大学的研究者,以 “曼德拉效应” 为视角,研究多智能体社交网络中错误信念的传播、持续与缓解。曼德拉效应通常指许多人对同一件事产生了相同的错误记忆。在人类社会中,这类错误记忆可能在无意间形成。在多智能体环境里,类似的群体性错误却可能由造假者刻意操纵信息来诱发。



  • 论文标题: False Belief Dissemination, Persistence and Mitigation in Multi-Agent Social Networks Through the Lens of the Mandela Effect
  • 论文链接: https://arxiv.org/abs/2610.33026

从 3・15 的虚构手环,

到智能体之间的错误信念

央视财经的调查演示中,业内人士虚构了名为 Apollo-9 的智能手环,用 GEO(生成式引擎优化)工具生成宣传文章并发布。两小时后,某款 AI 已能介绍这款不存在的商品,引用的正是当天发布的虚构文章。随后,多篇伪造的专家测评、行业排名和用户测评继续被发布,两款 AI 在推荐智能健康手环时把它排在前列(央视财经报道)。

3・15 案例展示了人为操纵信息源的现实风险:把不存在的商品写进文章,就可能让 AI 将其当成推荐依据,误导用户。研究进一步把问题放到多智能体环境中:当一个智能体接受错误说法后,把它记下来、告诉邻居、写成可搜索的文章,会不会让更多智能体也相信?



图 1:左侧对应虚构手环污染公开信息的现实案例。右侧以不存在的 Nano Guava 展示研究中的错误信念传播机制:消息、记忆和可搜索文章让虚假说法被接受并继续转述。

图右侧的 Nano Guava 是不存在的模型名称,“OpenAI 发布了一款名为 Nano Guava 的端侧模型” 是编造的说法。图中展示了这条虚假说法的传播过程。造假者先提供支持文章和消息,普通智能体在搜索与交流中接受相关说法,再把它写入记忆、转告其他智能体或发布新文章。这样,一个不存在的东西,也可能在交互中被模型当成真实存在的对象。这里的 “相信”,对应实验中对陈述作出 “接受” 的判断。

研究怎样追踪一条错误信息的传播?

研究搭建了一个受控环境:智能体可以交流、保留私人记忆、搜索和发布文章。所有网页均在本地模拟,虚假内容没有进入真实互联网。

主实验设置一个造假智能体和五个普通智能体。造假者推广虚假陈述,普通智能体结合邻居消息、搜索结果和记忆,判断接受、拒绝或不确定。接受某条陈述的普通智能体也会发布支持文章。前一轮的判断由此进入后一轮的搜索结果,成为新的依据。研究用虚假陈述作为可追踪的对象,观察普通智能体是否在互动中共同接受同一错误说法,并在造假者退出后继续保留这种判断。这种群体共享、持续存在的错误信念,就是这项研究从 “曼德拉效应” 视角考察的现象。

人类虚假记忆研究发现,一个事件看起来是否可能发生、是否与已有知识相容,会影响它被植入记忆的可能性。研究构建了 540 条虚假陈述,覆盖 8 个领域、4 个合理性层级,并在 10 个模型、3 种交流网络结构中进行评估。

受测模型分为开源和闭源两组:开源模型包括 Qwen3-8B、14B、32B、235B,以及 Llama-3.1-8B、Llama-3.3-70B。闭源模型包括 Claude Sonnet 5、Claude Opus 5、GPT-5.5 和 Gemini 2.5 Flash。研究分别在全连接、二叉树和双社区网络中观察它们的表现,比较模型能力和交流结构能否提供保护。

在传播阶段,研究分别考察传播范围和传播速度:有多少普通智能体接受虚假说法,以及接受立场在互动中何时形成。随后,再观察造假者退出后的影响能否持续,以及不同纠错措施是否有效。



图 2:实验比较不同交流结构,并在造假者退出后保留既有文章和私人记忆,追踪错误信念能否持续。

错误能传多广?

十个受测模型都受到影响

在只提供陈述、直接询问模型的基线测试中,虚假陈述接受率为 0.0%–9.1%。在主实验的十轮交互后,不同模型与网络设置下的末轮接受率达到 33.7%–96.0%。这表明,单次问答中的判断能力,未必能反映模型置于持续互动网络后的表现。更值得关注的是,全部十个受测模型都接受了部分虚假信息,覆盖开源与闭源模型。接受程度虽有差异,但本实验没有发现完全抵御这类影响的模型。



表 1 也展示了模型之间的差异。Qwen3-32B 在直接问答中没有接受这些虚假陈述,但经过互动后,其跨三种结构的平均接受率达到 94.5%。GPT-5.5 的对应数值从 2.6% 变为 50.4%。Claude Sonnet 5 的平均接受率相对较低,为 35.1%,仍存在明显的错误接受。

模型变大也没有带来一致的抵抗力。Qwen3-8B、14B、32B 的平均接受率分别为 85.0%、90.0%、94.5%,235B 模型则为 91.2%。这些结果没有呈现 “规模越大、越不容易被误导” 的规律。三种网络结构下的最终接受率在多数模型上也较接近,单靠改变谁与谁交流,未能阻止错误信念形成。

最终接受率相近,

传播速度也一样吗?

不同网络中的最终接受率可能接近,错误接受形成的时间却不一样。论文从第 2 轮开始,记录普通智能体最后一次从 “拒绝” 或 “不确定” 转为 “接受” 的轮次,仅统计出现这一转变的情况。轮次越小,表示最后一次转为接受发生得越早。图左侧按智能体统计,右侧对每条陈述取相关智能体中最晚的转变轮次,再计算平均值。



在 Qwen、Llama 和 Claude 三个模型系列中,双社区网络的这项平均轮次在智能体和陈述两个层面都最小。以 Qwen 系列的陈述层面结果为例,双社区为 3.73 轮,全连接为 5.07 轮。全连接网络让参与者接触更多消息,也可能带来更多冲突信息,使接受过程变慢。传播范围相近,并不意味着传播速度相同。

一个小模型造假者,

能影响其他模型吗?

主实验在每个设置中让造假者和普通智能体使用同一模型。研究还增加了混合模型实验:把造假者固定为 Qwen3-8B,逐一更换五个普通智能体所使用的模型,考察跨模型的信息影响。每组普通智能体使用同一种目标模型,表中的不同行代表不同实验组合。实验采用全连接结构,并从四个合理性层级各抽取 25 条陈述,共 100 条。结果显示,仅用这一个小模型作为造假者,全部九个受测目标模型仍出现了错误接受,其中也包括更大规模的开源模型和闭源模型。



这个实验将风险从同模型智能体交流扩展到了跨模型场景:一个规模较小的造假者,也可能通过消息和共享文章影响更大模型驱动的智能体。类似风险也出现在 3・15 案例中:一款 GEO 工具生成的虚假内容,可能影响多个 AI 平台的推荐。

造假者退出了,

错误信念还会留下吗?

错误信念还可能延续到造假者退出之后。在 Qwen3-8B 和 Llama-3.1-8B 的退出实验中,研究者让造假者在第 5 轮停止活动,但保留已发表的文章和普通智能体的记忆。到第 10 轮,各合理性层级下的平均接受率变化均在 ±0.8 个百分点以内。停止新的造假活动,并没有让已经形成的错误信念明显消退。



互动之后,

它还会把不存在的东西推荐给你吗?

接受一条虚假说法,还可能影响后续推荐。研究挑选了适合推荐问题的 260 条陈述,在每次互动结束后向五个普通智能体各追问一次,要求给出三个推荐对象。实验比较两种回答方式:只使用互动中的已有信息,或根据推荐问题重新搜索,再结合已有信息回答。

在推荐实验的十个模型和两种回答方式下,不存在的对象进入 Top-3 推荐名单的比例为 13.1%–75.8%。而在已经把虚构对象列入推荐名单的回答中,它排在第 1 位的比例达到 65.3%–92.4%,远高于三个对象随机排序时约三分之一的参照水平。

以 Qwen3-32B 为例,只使用已有信息时,75.8% 的回答推荐了虚构对象,在这些回答中,92.4% 把它排在首位。重新搜索后,这两个比例仍为 72.6% 和 91.4%。这与 3・15 虚构手环被 AI 推荐的案例相呼应:互动中形成的错误信念,可能进一步影响面向用户的推荐。

纠正具体错误,

比泛泛提醒更有效

研究进一步比较了预防与纠正措施。在 Qwen3-8B 的全连接网络实验中,未采用防御时,虚假陈述接受率为 84.4%。加入独立思考提醒后,接受率降至 79.7%。为原始背景网页标注官方来源时,则为 83.4%。

直接纠正已经传播的虚假说法,效果更明显。添加反驳文章后,接受率降至 57.1%。向所有普通智能体广播更正后,降至 27.8%。这些干预降低了错误接受率,但仍有残留。



回到 3・15 案例,虚构商品首先通过外部文章影响 AI。这项研究进一步表明,当智能体也成为信息生产者,错误还可能在群体内部反复传播,在造假者退出后留下影响,并进入后续推荐。一个 AI 写下的错误,可能成为另一个 AI 的证据,最后影响用户看到的答案。

从这些结果出发,用户可以在使用智能体时明确提醒它核对证据。例如:不要因为多篇网页重复同一说法就直接采信,请追溯原始出处,检查这些来源是否相互独立,证据不足时明确说明不确定。拿到具体的纠错材料后,也可以要求它重新核对此前的结论。实验中的独立思考提醒只带来有限改善,因此提示可以作为一道辅助措施,还需要可靠来源和针对具体错误的更正。

平台也需要承担维护信息环境的责任。除了检查被检索的外部资料,还应关注智能体发布了什么、这些内容如何被其他智能体再次使用。来源追踪、识别批量伪造内容、让纠错信息及时抵达受影响的智能体,都是值得推进的方向。

监管层面同样值得关注利用自动化发稿和虚假测评操纵 AI 推荐的行为,推动内容发布与分发平台建立可追踪、可申诉、可纠错的机制。虚构内容一旦被持续发布和转述,就可能污染共享的信息环境,影响多个系统及其用户。维护这一环境,需要内容生产者、平台和监管共同参与。

当 AI 生成的内容越来越多,智能体既能帮助人们整理知识、发现信息,也可能加速编造内容的传播。这种双刃剑效应,让可信智能体成为更迫切的研究方向。模型需要在持续交流、记忆和检索中保持判断,也需要在发现错误后更新结论。对虚假信息的抵抗力和纠错能力,值得与模型的任务能力一起受到关注。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中纪委重拳出击!这5大领域集中力量严查,百姓说好才算真的好!

中纪委重拳出击!这5大领域集中力量严查,百姓说好才算真的好!

细说职场
2026-11-09 13:27:17
美以伊局势:伊朗再遭美军袭击;特朗普称“铁门”特遣行动正全面展开,几乎没有物资能进出伊朗;以防长称对伊任务尚未完成,将先发制人

美以伊局势:伊朗再遭美军袭击;特朗普称“铁门”特遣行动正全面展开,几乎没有物资能进出伊朗;以防长称对伊任务尚未完成,将先发制人

扬子晚报
2026-11-09 07:19:58
横店迎来三十年最为惨烈的一次断臂求生!130多座摄影棚,合计50万平方米,全部免租金向剧组开放

横店迎来三十年最为惨烈的一次断臂求生!130多座摄影棚,合计50万平方米,全部免租金向剧组开放

扶苏聊历史
2026-10-28 15:47:11
黄仁勋承认出轨,国内热传出轨对象照片,而国外是关注调查

黄仁勋承认出轨,国内热传出轨对象照片,而国外是关注调查

不与世俗同
2026-11-09 09:22:11
11月8日俄乌:泽连斯基整肃乌安全局,俄军损失创新的绝对纪录

11月8日俄乌:泽连斯基整肃乌安全局,俄军损失创新的绝对纪录

山河路口
2026-11-08 20:24:00
谁是单季季后赛最强二当家?科比29.4分第一,皮蓬六冠最高21.6分前十不进!

谁是单季季后赛最强二当家?科比29.4分第一,皮蓬六冠最高21.6分前十不进!

小禾的体育
2026-11-09 14:15:24
公路车骑行服,熟女骑行穿搭,利落面料勾勒饱满曲线

公路车骑行服,熟女骑行穿搭,利落面料勾勒饱满曲线

只要高兴就好
2026-09-24 11:58:50
万亿央企蛀虫终于揪出来了!离职七年难逃法网,25年腐化史现真容

万亿央企蛀虫终于揪出来了!离职七年难逃法网,25年腐化史现真容

阿器谈史
2026-07-14 16:57:29
你读过回报率最高的书?网友:道德经三年时间负债50万到挣1000万

你读过回报率最高的书?网友:道德经三年时间负债50万到挣1000万

夜深爱杂谈
2026-11-07 19:28:35
WTT伊斯坦布尔赛名单出炉!国乒14人参加,王楚钦孙颖莎缺席

WTT伊斯坦布尔赛名单出炉!国乒14人参加,王楚钦孙颖莎缺席

芳草说体育
2026-11-09 10:55:56
11月中旬开始财喜同至,转机来袭,大小进账接连不断的三大生肖!

11月中旬开始财喜同至,转机来袭,大小进账接连不断的三大生肖!

星缘生肖
2026-11-08 11:59:45
九七之后,香港再无僵尸

九七之后,香港再无僵尸

最爱历史
2026-11-08 14:45:05
男演员术中突发心脏骤停,抢救无效不幸离世,公司:万分悲痛;其生前曾发文“明天全麻手术”“我现在怕得要死”,一度因母亲病情暂停演出

男演员术中突发心脏骤停,抢救无效不幸离世,公司:万分悲痛;其生前曾发文“明天全麻手术”“我现在怕得要死”,一度因母亲病情暂停演出

南方都市报
2026-11-09 08:09:43
美军4天3次空袭伊朗海岸,革命卫队宣传露馅,还有脸说控制海峡吗

美军4天3次空袭伊朗海岸,革命卫队宣传露馅,还有脸说控制海峡吗

云上乌托邦
2026-11-08 23:23:34
今年春节可能要不对劲了。

今年春节可能要不对劲了。

老陆不老
2026-11-07 19:37:41
北京八宝山,数万坟位期满却无人再缴,并非儿孙不孝,实在是家里兜不住了

北京八宝山,数万坟位期满却无人再缴,并非儿孙不孝,实在是家里兜不住了

扶苏聊历史
2026-11-04 18:20:53
突发异动!002913,强势涨停!PCB概念股爆发

突发异动!002913,强势涨停!PCB概念股爆发

证券时报
2026-11-09 11:53:04
拉出大便前面硬,后面软,提醒:可能是3种疾病影响,要重视

拉出大便前面硬,后面软,提醒:可能是3种疾病影响,要重视

健康科普365
2026-11-08 21:35:04
塔图姆19中6!凯尔特人逆转大胜!乔治立大功,不愧拿5400万年薪

塔图姆19中6!凯尔特人逆转大胜!乔治立大功,不愧拿5400万年薪

篮球大视野
2026-11-09 11:50:34
发生在医院里的八卦有多炸裂?网友:我来总结,医院里的主任是最多情的

发生在医院里的八卦有多炸裂?网友:我来总结,医院里的主任是最多情的

带你感受人间冷暖
2026-11-07 00:05:26
2026-11-09 14:43:00
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
14432文章数 142756关注度
往期回顾 全部

科技要闻

黄仁勋承认出轨:伤害了妻儿,毫无借口

头条要闻

牛弹琴:特朗普选发言人或搞了个大乌龙 震动整个美国

头条要闻

牛弹琴:特朗普选发言人或搞了个大乌龙 震动整个美国

体育要闻

见证奇迹!中超冠军属于大连

娱乐要闻

黄仁勋出轨对象疑曝光,情报部门介入

财经要闻

黄仁勋承认婚外情,牵出一家神秘AI公司

汽车要闻

限量版定金30万元/搭璇玑A3/对开门 仰望鼎曜正式亮相

态度原创

教育
时尚
游戏
亲子
房产

教育要闻

我用4杯“奶茶”,让“问题班级”大变样

伊姐周六热推:电视剧《折月亮》;电视剧《自首真相》......

玩家流失96%!研发六年的《上古世纪编年史》,三天就凉了?

亲子要闻

女性肚子上的最丑纹路……连何穗都没逃过?

房产要闻

为什么,海南买婚房的越来越少!

无障碍浏览 进入关怀版