网易首页 > 网易号 > 正文 申请入驻

Anthropic披露用AI"崩老头"案例:模拟4700种妹子,陪聊2.5万用户

0
分享至

昨天,Anthropic发布了迄今为止最详尽的威胁情报报告。内容涵盖了人们如何试图滥用 Claude——用于网络攻击、影响力行动、监控、生物学以及制造武器,以及其如何发现并阻止了他们。

内容劲爆,篇幅过长,加上合规考虑,小编难以完全披露。

具体可查询 https://www.anthropic.com/threat-intelligence-report-september-2026


这其中,有个编号为 GTG-15001 的“杀猪盘”案例,让人大跌眼镜,特作分享。

这家位于中国的App工作室,运营着一个由20多款约会App组成的网络,用 Claude 模拟妹子,去海外“崩老头”。”

Anthropic在2026年4月连续两周的调查中发现,这个网络中存在超过 4700个不同的AI人格,至少与 2.5万名不同用户进行过交流。

仅在这两周内,Claude就处理了大约 236万条消息

这些AI人格并不是单独存在的。运营方把AI和真人同时放进约会App的匹配池中,用户无法知道自己匹配到的究竟是AI还是真人。

Anthropic估计,AI与真人的比例大约为 31

真人工作人员主要承担AI难以完成的互动,例如实时视频通话,以及在社交媒体上回关用户。真人工作人员与用户交流时,也会获得另一个AI模型提供的候选回复。

具体来说,当真人工作人员与用户匹配后,另一个较小的模型会生成3条候选回复,工作人员从中选择一条发送。工作人员还会因为发送消息、进行视频通话以及在社交媒体上回关用户等行为获得报酬。

与此同时,Claude负责大规模、持续地与用户聊天。

运营方通过系统提示词要求Claude始终维持设定好的AI人格,并明确要求它不要透露自己是自动化程序。对于用户提出的视频通话和照片要求,Claude会进行回避,并按照预设的聊天阶段推进交流。

后台系统还会生成虚假的点赞和访客,在没有真人可以互动时提供视频内容,同时追踪哪些用户已经开始怀疑自己是在与机器人聊天。


这套系统并不是只使用一个AI模型。

Anthropic发现,Claude主要负责AI人格与用户之间的自动化聊天;另一个模型负责为真人工作人员生成回复建议,同时进行人脸吸引力评分以及照片、声音审核;另一个图像编辑模型则负责生成AI人格使用的头像。

Anthropic还发现,这些App本身采用了多种方式规避应用商店审核。

例如,其中一个UI控制器只有在App接受应用商店审核时才会启动,平时处于休眠状态。20多款App的不同版本还使用不同的class name,以降低被识别为同一套App网络的可能性。

App内部还设置了浏览器,可以将支付流程导向第三方支付处理商,而且支付功能可以通过服务器远程配置,在审核期间隐藏。

Anthropic还发现,这个团队大量使用中国大陆的API转售商和代理基础设施,以获得和轮换AI模型的访问权限。

在调查过程中,Anthropic还抽取了一部分聊天记录进行分析。报告称,相关系统提示词能够让Claude在几乎所有被抽样的对话中维持设定的人格。

报告同时提到,在少量案例中,Claude的推理过程显示,它意识到了用户可能面临潜在伤害。

例如,有用户透露自己患有严重疾病,或者处于严重的情绪困境。但在这些情况下,Claude仍继续按照设定的人格进行交流。

Anthropic随后封禁了与这一行动有关的账户和组织,并将相关调查结果与其他AI实验室等行业合作伙伴分享,以阻断相关运营者继续使用多个AI模型。

报告还列出了与这一网络相关的一些基础设施和App信息,包括 heyhru.comarchat.ussitin.ai 等网站,以及DORA、DONI、ROMI、LUMA、JOVIA、KIRA、GRACECHAT、HAVEN、NALO、LOVIA等约会App品牌。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
贺子珍坦言:遵义会议后,毛主席像是换了个人,原因让人心疼

贺子珍坦言:遵义会议后,毛主席像是换了个人,原因让人心疼

刘笤说体坛
2026-09-11 18:06:09
韦世豪提前放假了,成都4轮不至于拿不到1分,大连4连胜更难,冠军难有悬念

韦世豪提前放假了,成都4轮不至于拿不到1分,大连4连胜更难,冠军难有悬念

替补席看球
2026-09-12 11:58:56
你的工作要求你对客户隐瞒什么?网友:普通人越早知道越好!

你的工作要求你对客户隐瞒什么?网友:普通人越早知道越好!

另子维爱读史
2026-09-11 22:46:34
印度专家谈到中国时满脸不可置信:中国竟有50多个城市有地铁!

印度专家谈到中国时满脸不可置信:中国竟有50多个城市有地铁!

奇葩游戏酱
2026-09-09 07:06:57
NBA史上最强营销!一个二轮秀被包装成状元,结果救活了所有水货

NBA史上最强营销!一个二轮秀被包装成状元,结果救活了所有水货

碧珠映红香
2026-09-11 12:04:57
乌军迎来坏消息!解放军赴俄后,大批国家紧随其后,美国也在其中

乌军迎来坏消息!解放军赴俄后,大批国家紧随其后,美国也在其中

旧窗老街
2026-09-12 06:17:56
教了12年初中,我劝家长狠下心:只要孩子没中考,哪怕被嫌弃丢人也必须接送

教了12年初中,我劝家长狠下心:只要孩子没中考,哪怕被嫌弃丢人也必须接送

户外阿毽
2026-09-12 00:20:38
原来他是杨舒予父亲,曾是前国脚,为女儿们搬家广州,已去世1年

原来他是杨舒予父亲,曾是前国脚,为女儿们搬家广州,已去世1年

幽棠的趣式
2026-09-11 09:23:20
薇娅怀二胎了,但更值得聊的是她“退网”这五年干了什么?

薇娅怀二胎了,但更值得聊的是她“退网”这五年干了什么?

华文商讯
2026-09-10 10:48:36
16亿拍了个劝退申奥片,印度扬言办震惊世界的奥运会:放心,能震惊,但可能方式不一样

16亿拍了个劝退申奥片,印度扬言办震惊世界的奥运会:放心,能震惊,但可能方式不一样

王新喜
2026-09-11 13:06:39
戴笠拼死保护毛主席,不是心软,是蒋介石一句话让他冷汗直流

戴笠拼死保护毛主席,不是心软,是蒋介石一句话让他冷汗直流

顾史
2026-07-28 08:43:09
阿尔特塔:不理解热苏斯的言论,和他私聊时我俩说的都是好话

阿尔特塔:不理解热苏斯的言论,和他私聊时我俩说的都是好话

懂球帝
2026-09-11 18:30:45
离谱!曼联昔日王牌断崖下滑!卡里克必须果断拿下他

离谱!曼联昔日王牌断崖下滑!卡里克必须果断拿下他

澜归序
2026-09-12 08:35:47
从135到98,肚子瘪下去才明白:内脏脂肪最怕的,从来不是跑步

从135到98,肚子瘪下去才明白:内脏脂肪最怕的,从来不是跑步

健身狂人
2026-09-06 02:07:39
1975年,四川挖出一具女尸,经鉴定确认,她就是中央多次打听的人

1975年,四川挖出一具女尸,经鉴定确认,她就是中央多次打听的人

香姨谈史
2026-09-08 09:30:13
人活多久,看起夜就知道?寿命短的人,起夜一般有这3个特征

人活多久,看起夜就知道?寿命短的人,起夜一般有这3个特征

芹姐说生活
2026-09-10 23:50:29
主动请缨!李凯尔想再次征战世界杯!

主动请缨!李凯尔想再次征战世界杯!

柚子说球
2026-09-11 20:07:27
天津津门虎战胜辽宁铁人,武汉三镇击败河南队,负者就进入保级区

天津津门虎战胜辽宁铁人,武汉三镇击败河南队,负者就进入保级区

足球分析员
2026-09-12 11:00:03
解放战争时期,中央领导核心其实只有三人,三大战役均由他们指挥

解放战争时期,中央领导核心其实只有三人,三大战役均由他们指挥

谈古论今历史有道
2026-09-11 15:10:03
媒体人:李凯尔若参赛费用谁来出是问题 23年是四川女篮老板出资

媒体人:李凯尔若参赛费用谁来出是问题 23年是四川女篮老板出资

云隐南山
2026-09-12 11:35:14
2026-09-12 12:31:00
AI先锋官 incentive-icons
AI先锋官
AIGC大模型及应用精选与评测
668文章数 104关注度
往期回顾 全部

科技要闻

苹果折叠屏比小米华为贵5000元,该怎么选

头条要闻

上海7岁女童遭搅拌车辗轧双腿高位截肢 奶奶当场死亡

头条要闻

上海7岁女童遭搅拌车辗轧双腿高位截肢 奶奶当场死亡

体育要闻

老鹰真正的底气来自于什么?

娱乐要闻

港媒曝钟丽淇疑患渐冻症,本人发文

财经要闻

继房子茅台之后 中产的第"神话"也破灭了

汽车要闻

买菜车也有小乐趣 风云T7不止是台合格家用SUV

态度原创

房产
健康
游戏
公开课
军事航空

房产要闻

别再等了!广州改善好房,正在进入“卖一套少一套”时代

手脚发麻口齿不清?也可能是中风!

《塞尔达传说》新作实体封面曝光!背面超帅 顶尖设计

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

涉伊朗核问题 中国和俄罗斯投下反对票

无障碍浏览 进入关怀版