网易首页 > 网易号 > 正文 申请入驻

AI也会「以讹传讹」?AI的「曼德拉效应」探索

0
分享至



一款根本不存在的智能手环,为什么会出现在 AI 的推荐名单里?2026 年央视 3・15 晚会曝光的 “AI 投毒” 案例,让这个问题引起了人们的关注:虚构商品被写进测评、排名和用户评价,随后被 AI 当作推荐依据。



如果 AI 还会相互交流、保存记忆、发布文章,最初的错误又会怎样发展?一项围绕多智能体社交网络的研究发现,虚假说法可能在持续互动中被普通智能体接受,逐渐形成群体共同接受的 “事实”,甚至在造假者停止活动后继续存在。

来自香港中文大学、爱丁堡大学、香港理工大学、同济大学和牛津大学的研究者,以 “曼德拉效应” 为视角,研究多智能体社交网络中错误信念的传播、持续与缓解。曼德拉效应通常指许多人对同一件事产生了相同的错误记忆。在人类社会中,这类错误记忆可能在无意间形成。在多智能体环境里,类似的群体性错误却可能由造假者刻意操纵信息来诱发。



  • 论文标题: False Belief Dissemination, Persistence and Mitigation in Multi-Agent Social Networks Through the Lens of the Mandela Effect
  • 论文链接: https://arxiv.org/abs/2610.33026

从 3・15 的虚构手环,

到智能体之间的错误信念

央视财经的调查演示中,业内人士虚构了名为 Apollo-9 的智能手环,用 GEO(生成式引擎优化)工具生成宣传文章并发布。两小时后,某款 AI 已能介绍这款不存在的商品,引用的正是当天发布的虚构文章。随后,多篇伪造的专家测评、行业排名和用户测评继续被发布,两款 AI 在推荐智能健康手环时把它排在前列(央视财经报道)。

3・15 案例展示了人为操纵信息源的现实风险:把不存在的商品写进文章,就可能让 AI 将其当成推荐依据,误导用户。研究进一步把问题放到多智能体环境中:当一个智能体接受错误说法后,把它记下来、告诉邻居、写成可搜索的文章,会不会让更多智能体也相信?



图 1:左侧对应虚构手环污染公开信息的现实案例。右侧以不存在的 Nano Guava 展示研究中的错误信念传播机制:消息、记忆和可搜索文章让虚假说法被接受并继续转述。

图右侧的 Nano Guava 是不存在的模型名称,“OpenAI 发布了一款名为 Nano Guava 的端侧模型” 是编造的说法。图中展示了这条虚假说法的传播过程。造假者先提供支持文章和消息,普通智能体在搜索与交流中接受相关说法,再把它写入记忆、转告其他智能体或发布新文章。这样,一个不存在的东西,也可能在交互中被模型当成真实存在的对象。这里的 “相信”,对应实验中对陈述作出 “接受” 的判断。

研究怎样追踪一条错误信息的传播?

研究搭建了一个受控环境:智能体可以交流、保留私人记忆、搜索和发布文章。所有网页均在本地模拟,虚假内容没有进入真实互联网。

主实验设置一个造假智能体和五个普通智能体。造假者推广虚假陈述,普通智能体结合邻居消息、搜索结果和记忆,判断接受、拒绝或不确定。接受某条陈述的普通智能体也会发布支持文章。前一轮的判断由此进入后一轮的搜索结果,成为新的依据。研究用虚假陈述作为可追踪的对象,观察普通智能体是否在互动中共同接受同一错误说法,并在造假者退出后继续保留这种判断。这种群体共享、持续存在的错误信念,就是这项研究从 “曼德拉效应” 视角考察的现象。

人类虚假记忆研究发现,一个事件看起来是否可能发生、是否与已有知识相容,会影响它被植入记忆的可能性。研究构建了 540 条虚假陈述,覆盖 8 个领域、4 个合理性层级,并在 10 个模型、3 种交流网络结构中进行评估。

受测模型分为开源和闭源两组:开源模型包括 Qwen3-8B、14B、32B、235B,以及 Llama-3.1-8B、Llama-3.3-70B。闭源模型包括 Claude Sonnet 5、Claude Opus 5、GPT-5.5 和 Gemini 2.5 Flash。研究分别在全连接、二叉树和双社区网络中观察它们的表现,比较模型能力和交流结构能否提供保护。

在传播阶段,研究分别考察传播范围和传播速度:有多少普通智能体接受虚假说法,以及接受立场在互动中何时形成。随后,再观察造假者退出后的影响能否持续,以及不同纠错措施是否有效。



图 2:实验比较不同交流结构,并在造假者退出后保留既有文章和私人记忆,追踪错误信念能否持续。

错误能传多广?

十个受测模型都受到影响

在只提供陈述、直接询问模型的基线测试中,虚假陈述接受率为 0.0%–9.1%。在主实验的十轮交互后,不同模型与网络设置下的末轮接受率达到 33.7%–96.0%。这表明,单次问答中的判断能力,未必能反映模型置于持续互动网络后的表现。更值得关注的是,全部十个受测模型都接受了部分虚假信息,覆盖开源与闭源模型。接受程度虽有差异,但本实验没有发现完全抵御这类影响的模型。



表 1 也展示了模型之间的差异。Qwen3-32B 在直接问答中没有接受这些虚假陈述,但经过互动后,其跨三种结构的平均接受率达到 94.5%。GPT-5.5 的对应数值从 2.6% 变为 50.4%。Claude Sonnet 5 的平均接受率相对较低,为 35.1%,仍存在明显的错误接受。

模型变大也没有带来一致的抵抗力。Qwen3-8B、14B、32B 的平均接受率分别为 85.0%、90.0%、94.5%,235B 模型则为 91.2%。这些结果没有呈现 “规模越大、越不容易被误导” 的规律。三种网络结构下的最终接受率在多数模型上也较接近,单靠改变谁与谁交流,未能阻止错误信念形成。

最终接受率相近,

传播速度也一样吗?

不同网络中的最终接受率可能接近,错误接受形成的时间却不一样。论文从第 2 轮开始,记录普通智能体最后一次从 “拒绝” 或 “不确定” 转为 “接受” 的轮次,仅统计出现这一转变的情况。轮次越小,表示最后一次转为接受发生得越早。图左侧按智能体统计,右侧对每条陈述取相关智能体中最晚的转变轮次,再计算平均值。



在 Qwen、Llama 和 Claude 三个模型系列中,双社区网络的这项平均轮次在智能体和陈述两个层面都最小。以 Qwen 系列的陈述层面结果为例,双社区为 3.73 轮,全连接为 5.07 轮。全连接网络让参与者接触更多消息,也可能带来更多冲突信息,使接受过程变慢。传播范围相近,并不意味着传播速度相同。

一个小模型造假者,

能影响其他模型吗?

主实验在每个设置中让造假者和普通智能体使用同一模型。研究还增加了混合模型实验:把造假者固定为 Qwen3-8B,逐一更换五个普通智能体所使用的模型,考察跨模型的信息影响。每组普通智能体使用同一种目标模型,表中的不同行代表不同实验组合。实验采用全连接结构,并从四个合理性层级各抽取 25 条陈述,共 100 条。结果显示,仅用这一个小模型作为造假者,全部九个受测目标模型仍出现了错误接受,其中也包括更大规模的开源模型和闭源模型。



这个实验将风险从同模型智能体交流扩展到了跨模型场景:一个规模较小的造假者,也可能通过消息和共享文章影响更大模型驱动的智能体。类似风险也出现在 3・15 案例中:一款 GEO 工具生成的虚假内容,可能影响多个 AI 平台的推荐。

造假者退出了,

错误信念还会留下吗?

错误信念还可能延续到造假者退出之后。在 Qwen3-8B 和 Llama-3.1-8B 的退出实验中,研究者让造假者在第 5 轮停止活动,但保留已发表的文章和普通智能体的记忆。到第 10 轮,各合理性层级下的平均接受率变化均在 ±0.8 个百分点以内。停止新的造假活动,并没有让已经形成的错误信念明显消退。



互动之后,

它还会把不存在的东西推荐给你吗?

接受一条虚假说法,还可能影响后续推荐。研究挑选了适合推荐问题的 260 条陈述,在每次互动结束后向五个普通智能体各追问一次,要求给出三个推荐对象。实验比较两种回答方式:只使用互动中的已有信息,或根据推荐问题重新搜索,再结合已有信息回答。

在推荐实验的十个模型和两种回答方式下,不存在的对象进入 Top-3 推荐名单的比例为 13.1%–75.8%。而在已经把虚构对象列入推荐名单的回答中,它排在第 1 位的比例达到 65.3%–92.4%,远高于三个对象随机排序时约三分之一的参照水平。

以 Qwen3-32B 为例,只使用已有信息时,75.8% 的回答推荐了虚构对象,在这些回答中,92.4% 把它排在首位。重新搜索后,这两个比例仍为 72.6% 和 91.4%。这与 3・15 虚构手环被 AI 推荐的案例相呼应:互动中形成的错误信念,可能进一步影响面向用户的推荐。

纠正具体错误,

比泛泛提醒更有效

研究进一步比较了预防与纠正措施。在 Qwen3-8B 的全连接网络实验中,未采用防御时,虚假陈述接受率为 84.4%。加入独立思考提醒后,接受率降至 79.7%。为原始背景网页标注官方来源时,则为 83.4%。

直接纠正已经传播的虚假说法,效果更明显。添加反驳文章后,接受率降至 57.1%。向所有普通智能体广播更正后,降至 27.8%。这些干预降低了错误接受率,但仍有残留。



回到 3・15 案例,虚构商品首先通过外部文章影响 AI。这项研究进一步表明,当智能体也成为信息生产者,错误还可能在群体内部反复传播,在造假者退出后留下影响,并进入后续推荐。一个 AI 写下的错误,可能成为另一个 AI 的证据,最后影响用户看到的答案。

从这些结果出发,用户可以在使用智能体时明确提醒它核对证据。例如:不要因为多篇网页重复同一说法就直接采信,请追溯原始出处,检查这些来源是否相互独立,证据不足时明确说明不确定。拿到具体的纠错材料后,也可以要求它重新核对此前的结论。实验中的独立思考提醒只带来有限改善,因此提示可以作为一道辅助措施,还需要可靠来源和针对具体错误的更正。

平台也需要承担维护信息环境的责任。除了检查被检索的外部资料,还应关注智能体发布了什么、这些内容如何被其他智能体再次使用。来源追踪、识别批量伪造内容、让纠错信息及时抵达受影响的智能体,都是值得推进的方向。

监管层面同样值得关注利用自动化发稿和虚假测评操纵 AI 推荐的行为,推动内容发布与分发平台建立可追踪、可申诉、可纠错的机制。虚构内容一旦被持续发布和转述,就可能污染共享的信息环境,影响多个系统及其用户。维护这一环境,需要内容生产者、平台和监管共同参与。

当 AI 生成的内容越来越多,智能体既能帮助人们整理知识、发现信息,也可能加速编造内容的传播。这种双刃剑效应,让可信智能体成为更迫切的研究方向。模型需要在持续交流、记忆和检索中保持判断,也需要在发现错误后更新结论。对虚假信息的抵抗力和纠错能力,值得与模型的任务能力一起受到关注。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
民意彻底逆转!乌克兰人最恨的不是普京,也不是特朗普,而是曾承诺让乌克兰更好的泽连斯基;而他当初能上台,这件事本身就相当离奇

民意彻底逆转!乌克兰人最恨的不是普京,也不是特朗普,而是曾承诺让乌克兰更好的泽连斯基;而他当初能上台,这件事本身就相当离奇

人生录
2026-10-12 15:41:39
横店迎来三十年最为惨烈的一次断臂求生!130多座摄影棚,合计50万平方米,全部免租金向剧组开放

横店迎来三十年最为惨烈的一次断臂求生!130多座摄影棚,合计50万平方米,全部免租金向剧组开放

扶苏聊历史
2026-10-28 15:47:11
又轰下41+6+6!抱歉詹姆斯:你的NBA纪录被打破了

又轰下41+6+6!抱歉詹姆斯:你的NBA纪录被打破了

篮球大视野
2026-11-08 14:45:47
商南命案评论炸了!网友追问第3个男性死者到底是谁?知情人爆料

商南命案评论炸了!网友追问第3个男性死者到底是谁?知情人爆料

小鋭有话说
2026-11-08 20:33:46
《持械入宋》主创团队回应爆款传闻:没有大额投流,也没赚1000万

《持械入宋》主创团队回应爆款传闻:没有大额投流,也没赚1000万

界面新闻
2026-11-09 09:24:01
26+12+10!杨瀚森连创三大生涯纪录,给机会真能把握住啊

26+12+10!杨瀚森连创三大生涯纪录,给机会真能把握住啊

篮球圈里的那些事
2026-11-08 14:22:27
现在的就业环境已经是地狱级难度了

现在的就业环境已经是地狱级难度了

东亚财评V
2026-11-09 07:09:57
上限乔丹下限科比!母子恋男主,今年废了...

上限乔丹下限科比!母子恋男主,今年废了...

左右为篮
2026-11-08 12:16:13
跌出前四!英超大冷门:11.5亿豪门0-1惨遭垫底队爆冷 近4场仅1胜

跌出前四!英超大冷门:11.5亿豪门0-1惨遭垫底队爆冷 近4场仅1胜

狍子歪解体坛
2026-11-09 00:02:39
相伴41年宠妻人设崩塌!千金紧急取消行程,黄仁勋豪门宫斗开场?

相伴41年宠妻人设崩塌!千金紧急取消行程,黄仁勋豪门宫斗开场?

不似少年游
2026-11-09 11:39:26
一男子自称是“詹姆斯的儿子”,涉嫌试图擅闯其住宅被逮捕,詹姆斯回应:家人很安全,仍在调查相关情况

一男子自称是“詹姆斯的儿子”,涉嫌试图擅闯其住宅被逮捕,詹姆斯回应:家人很安全,仍在调查相关情况

台州交通广播
2026-11-09 13:47:17
死亡人数预估高达29.8万!高市政府发出警报,国难级巨灾不容忽视

死亡人数预估高达29.8万!高市政府发出警报,国难级巨灾不容忽视

北海史记
2026-11-08 23:50:02
古代最阴损的武器,中招之人生不如死

古代最阴损的武器,中招之人生不如死

深度知局
2026-11-09 07:18:14
11月中旬开始财喜同至,转机来袭,大小进账接连不断的三大生肖!

11月中旬开始财喜同至,转机来袭,大小进账接连不断的三大生肖!

星缘生肖
2026-11-08 11:59:45
刘恺威停工一年半陪读,女儿同学爆料,糯米作文里都是对爸爸夸奖

刘恺威停工一年半陪读,女儿同学爆料,糯米作文里都是对爸爸夸奖

柒佰娱
2026-11-09 09:03:22
中超联赛正式收官!或许比降级的海牛和武汉更难过的,是河南

中超联赛正式收官!或许比降级的海牛和武汉更难过的,是河南

篮球圈里的那些事
2026-11-08 19:49:39
郑丽文遭打脸!国民党豪摆120桌、竟无她一席之地?2人未免太绝情

郑丽文遭打脸!国民党豪摆120桌、竟无她一席之地?2人未免太绝情

王姐懒人家常菜
2026-11-09 10:43:30
暴跌76.8%,卫浴“洋品牌”败走中国

暴跌76.8%,卫浴“洋品牌”败走中国

投资家
2026-11-08 21:21:49
老公洗澡出来把我抱上床,折腾完他去阳台抽烟,我竟在他裤兜里翻

老公洗澡出来把我抱上床,折腾完他去阳台抽烟,我竟在他裤兜里翻

有态度网友19Dsym
2026-10-15 01:15:32
穆里尼奥皇马涅槃封神!阿隆索切尔西彻底迷失!老佛爷赌对了

穆里尼奥皇马涅槃封神!阿隆索切尔西彻底迷失!老佛爷赌对了

奶盖熊本熊
2026-11-09 08:56:21
2026-11-09 14:32:49
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
14432文章数 142756关注度
往期回顾 全部

科技要闻

AI机房被卡,美股重挫!英伟达大跌9%

头条要闻

丈夫凌晨4点和陌生女子通话 妻子赌气与异性开房3天

头条要闻

丈夫凌晨4点和陌生女子通话 妻子赌气与异性开房3天

体育要闻

40岁,正是绝杀的年纪!

娱乐要闻

敬一丹女儿追忆母亲:她被世界铭记

财经要闻

市场能接受AI繁荣退潮吗?

汽车要闻

限时权益价8.88万 吉利星愿STAR限定系列发布

态度原创

健康
时尚
艺术
房产
教育

痘痘长到25岁还没完?查查内分泌

把北京喝成一杯酒

艺术要闻

17位 国外画家笔下的女子

房产要闻

突发!海口新政:小户型回来了!

教育要闻

72哈哈哈哈哈哈哈哈哈

无障碍浏览 进入关怀版