网易首页 > 网易号 > 正文 申请入驻

AI给警察局提供凶案线索!果然,是假的……

0
分享至

Anthropic的AI,去警察局的凶杀案调查网站上提供假线索了。

2026年7月18日晚上11点27分,美国费城警方的未破凶杀案网站(Philly Police Unsolved Murders)收到了一条新线索。这个网站上有一系列真实的案件情况和受害者资料,访客可以匿名提供文字,也能上传照片。如果线索有助于破案并促成定罪,最高能拿到2万美元的奖金。[1][2]


每个“案件详情”中都有详细描述,且可以提交文字或照片丨Philly Police Unsolved Murders

那天深夜,填写表单的却不是目击了凶案发生的人类,而是Anthropic正在测试的Claude Haiku 4.5。它被要求在随机选取的网页上,自行生成示例任务并执行。

来到一则未破凶案的页面后,它打开了征集线索的入口,并写下一段颇像真人在回忆案发现场的话:

我可能掌握这起案件的一些信息。我记得在案发那段时间,在某某街道附近看见过一个与描述相符的人。如果这条信息有用,请联系我。

它没有留下姓名和联系方式,轻轻一点就把编造的线索送了出去。 [3]

这条假线索在记录里躺了两个多月。Anthropic直到9月28日才发现Claude Haiku 4.5干了如此坏事,随后停止了造成这次提交的自动测试。但是,直到10月7日,费城警方才被告知此事;双方10月8日会面,10月9日警方率先向公众披露此事。[4]

好在假线索没有变成真正的调查。阴差阳错地,“有新线索”的通知邮件落进了垃圾邮件文件夹,没有被人类打开。警方没有公布邮件为何被判为垃圾邮件,同时表示,就算假线索后续进入正常流程,也仍会由人审核、寻找旁证,不会直接当成事实采纳。[5]

费城警方明确批评,从事件发生到发现、通报,耗时两个多月,“不可接受”。

这当然不是唯一一个“灵机一动”

令人不安(但或许大家已经习以为常)的是,假线索不是报告中唯一一次意外。它们大致可以归成两类。

第一类,正常道路走不通,模型另寻它法。

Anthropic的一些工具不允许访问过长的网址,因为长网址可能装入攻击网站的命令。Claude就把长网址交给免费短地址服务,利用它通过检查,之后再跳转到长网址 [3]。


短链服务da.gd发现Claude测试模型在蹭它们的服务

怎么说呢,就好像你为了绕过廉航的行李称重,把多余东西都哐哐塞进了马甲里,上飞机之后再把它们掏出来,重新放回行李包。

有时候不知道该不该夸它持之以恒。Claude需要使用大学网站上的工具完成科学计算,工具却报了错。它没有放弃,去扒了服务器代码,从代码中找到漏洞,利用漏洞完成计算。

另一次,一个测试让Claude Mythos 5根据照片判断拍摄地点。模型打算查询地方政府的房产地图再逐步缩小范围,但又被测试工具限制了不得在网页上连续点击。于是它查看绕过网页界面,直接向地图的后台服务器索取资料。它还曾设法避开付费入口,取得原本需要付费的公共资料。

麻烦在于,它不总能分清什么是待解决的难题,什么是未经允许不能跨过的边界。

第二种是,它没有意识到“现在该停了”。

一次测试中,Claude Haiku 4.5得到的要求很明确:可以把表格填完,但不要提交。它却几次按下提交键,因为它以为后面还会出现一个确认页面。 [3]费城警方收到的假线索也属于这一类。

一个AI会自己找路,但不知道应该在哪里停下、更不知道它的动作会导致何种现实后果。这是大难题,是一时半会儿都解决不了的大难题。


Anthropic认为此次披露的案例,严重程度低于夏天的网络安全事件丨Anthropic官网

Anthropic这次认为,目前查到的案例实际影响有限,也没有发现客户数据因此受到波及。公司已暂停内部评测的实时联网访问,并增加对异常操作的监测。

CEO达里奥·阿莫迪(Dario Amodei)一直呼吁,人工智能的开发速度应该放缓,以便实验室能够建立完善的防护措施。

但是,你们为什么让一个缺少人工监督的新模型自行操作真实网站呢? [6]

参考文献

[1] Philadelphia Police Department. Philly Police Unsolved Murders. Philly Police Unsolved Murders.https://www.phillyunsolvedmurders.com/.

[2] Philadelphia Police Department. Submit a Tip Online. Philly Police Unsolved Murders. 无日期,访问于2026年10月10日。https://www.phillyunsolvedmurders.com/forms/submit-a-tip-online/.

[3] Anthropic. Investigating unintended model actions in our evaluations and internal use. Anthropic. 2026年10月9日。https://www.anthropic.com/research/investigating-unintended-model-actions.

[4] David Chang. Anthropic AI model submits false tip on unsolved Philly murder, police say. NBC10 Philadelphia. 2026年10月9日。https://www.nbcphiladelphia.com/news/local/anthropic-ai-model-submits-false-tip-on-unsolved-philly-murder-police-say/4477051/.

[5] Mary Cunningham. Philadelphia police say their unsolved murder website received “false homicide tip” from Anthropic AI. CBS News. 2026年10月9日。https://www.cbsnews.com/news/philadelphia-police-anthropic-ai-false-homicide-tip/.

[6] Amanda Silberling. An Anthropic AI model sent a false homicide tip to Philadelphia police. TechCrunch. 2026年10月9日。https://techcrunch.com/2026/10/09/an-anthropic-ai-model-sent-a-false-homicide-tip-to-philadelphia-police/.

[8] Costas Pitas. Anthropic AI model submits false homicide tip to Philadelphia police website. Reuters. 2026年10月9日。KSL转载全文.

作者:Luna

点个“小爱心”吧


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
王曼昱打佐藤瞳那场,看台上有个大老爷们咬着后槽牙的那种吼法

王曼昱打佐藤瞳那场,看台上有个大老爷们咬着后槽牙的那种吼法

江启
2026-10-18 18:00:05
黄任中:我睡过100位女明星,9女同床纵欲无度,晚年欠债缠身孤死

黄任中:我睡过100位女明星,9女同床纵欲无度,晚年欠债缠身孤死

春之寞陌
2026-10-11 16:21:42
港媒关注张继科刘丁硕之争 网友:刘曾请小胖签名卖给粉丝五千一个

港媒关注张继科刘丁硕之争 网友:刘曾请小胖签名卖给粉丝五千一个

劲爆体坛
2026-10-18 17:59:04
第一批抢到iPhone Duo的人,正急着加价卖

第一批抢到iPhone Duo的人,正急着加价卖

财天COVER
2026-10-18 13:19:21
终于明白为什么有钱人的气质穷人模仿不来了,网友的回答我破防了

终于明白为什么有钱人的气质穷人模仿不来了,网友的回答我破防了

另子维爱读史
2026-10-17 19:24:03
史诗级诈骗!0出场赛季报销,躺赚350万,国王被西蒙斯坑麻了

史诗级诈骗!0出场赛季报销,躺赚350万,国王被西蒙斯坑麻了

体育吐槽
2026-10-19 09:16:45
泽连斯基彻底摊牌了:如果普京再打乌克兰,特朗普就动手打普京!

泽连斯基彻底摊牌了:如果普京再打乌克兰,特朗普就动手打普京!

介知
2026-10-19 05:46:46
中方坚持要高市认错,日高层回国坦言:错在于我们,没必要装成大国

中方坚持要高市认错,日高层回国坦言:错在于我们,没必要装成大国

至死不渝的爱情
2026-10-17 21:34:19
“父亲开大奔,才能养出这种女儿”,浙大女孩返校一幕火了,长相普通,但气质一流

“父亲开大奔,才能养出这种女儿”,浙大女孩返校一幕火了,长相普通,但气质一流

世界圈
2026-10-14 15:28:36
9场轰4球!中国留洋小将闪耀欧洲,助红星U19扳平比分,前途无量

9场轰4球!中国留洋小将闪耀欧洲,助红星U19扳平比分,前途无量

汪星人哟
2026-10-18 18:55:40
不敢和王后握手,却得到王后拥抱!苏提达的高情商,欧拉弄学不来

不敢和王后握手,却得到王后拥抱!苏提达的高情商,欧拉弄学不来

铁锤妹妹是只猫
2026-10-19 00:46:40
苹果版电子茅台!第一批抢到iPhone Duo的人已加价5000元转卖

苹果版电子茅台!第一批抢到iPhone Duo的人已加价5000元转卖

快科技
2026-10-19 07:57:05
杜润旺5记三分手刃老东家!赛后拥抱胡明轩,广东官方保持沉默

杜润旺5记三分手刃老东家!赛后拥抱胡明轩,广东官方保持沉默

林小湜体育频道
2026-10-19 00:46:19
细思极恐!梅艳芳骨灰被盗真相曝光,窃贼逃去东南亚,网友揪心

细思极恐!梅艳芳骨灰被盗真相曝光,窃贼逃去东南亚,网友揪心

东方不败然多多
2026-10-19 07:10:18
焚烧车辆、打砸商铺、闯入政府机构纵火,法国多地爆发示威抗议;驻法大使馆:中国公民特别是游客,避免前往游行示威区域,远离冲突地区

焚烧车辆、打砸商铺、闯入政府机构纵火,法国多地爆发示威抗议;驻法大使馆:中国公民特别是游客,避免前往游行示威区域,远离冲突地区

南方都市报
2026-10-18 19:21:14
俄罗斯令中国心寒?比西方围堵更恐怖的,是我们看轻了自己的实力

俄罗斯令中国心寒?比西方围堵更恐怖的,是我们看轻了自己的实力

梁濆爱玩车
2026-08-31 23:53:08
国外发现“饿两天定律”,体重从138斤降到108斤,稳稳瘦下30斤

国外发现“饿两天定律”,体重从138斤降到108斤,稳稳瘦下30斤

健身狂人
2026-10-11 00:58:32
内娱要变天了?5位全新AI艺人正式成团出道,持证上岗、拍剧营业

内娱要变天了?5位全新AI艺人正式成团出道,持证上岗、拍剧营业

娱说瑜悦
2026-10-18 17:38:48
中超夺冠还要等,球迷笑称:成都蓉城拉着庆祝冠军的物品,走遍了大半个中国

中超夺冠还要等,球迷笑称:成都蓉城拉着庆祝冠军的物品,走遍了大半个中国

尘语者
2026-10-19 10:29:10
北理工裴副教授很聪明,在国外水了个硕士,博士回国内读,毕业后给院长师叔当助理

北理工裴副教授很聪明,在国外水了个硕士,博士回国内读,毕业后给院长师叔当助理

江山挥笔
2026-09-25 20:51:02
2026-10-19 12:11:00
果壳 incentive-icons
果壳
科技有意思
28482文章数 4150033关注度
往期回顾 全部

科技要闻

王晟:近千亿资金涌入后 具身智能开始退烧

头条要闻

中国留学生在莫斯科大学课堂身披旭日旗 本人鞠躬道歉

头条要闻

中国留学生在莫斯科大学课堂身披旭日旗 本人鞠躬道歉

体育要闻

从NBA退役10年后,他真去警局上班了

娱乐要闻

演员许君聪近况曝光 婚恋成谜让人唏嘘

财经要闻

三季度GDP,同比增长4.5%

汽车要闻

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

手机
房产
游戏
健康
教育

手机要闻

传LG Display目标2029年量产FLiPP,瞄准苹果OLED Studio Display订单

房产要闻

最新房价:海口,三亚齐跌!

SCS 2026年度总决赛落幕 选手MadkoF、XiaoHai分获《拳皇15》《饿狼传说:群狼之城》冠军

看着很健康的人,怎么会突然猝死?

教育要闻

纪念中国工农红军长征胜利90周年 | “遵义红·数字行”:AI赋能思政教育的课程实践

无障碍浏览 进入关怀版