网易首页 > 网易号 > 正文 申请入驻

从OpenAI到Anthropic,大模型越界攻击增多,企业不得不防

0
分享至

几天前,OpenAI披露其两个前沿AI模型逃脱了封控措施,自主对AI代码共享平台Hugging Face发动了网络攻击。就在外界聚焦于这起事件时,OpenAI的美国主要竞争对手Anthropic今晚也透露:他们同样发生了模型在不应访问网络时秘密联网、并对另外三家组织发起网络攻击、获得“未经授权访问”的情况。

在OpenAI事件之后,Anthropic的披露进一步表明,前沿大模型在评估或运行过程中接触真实生产系统并已实施攻击,并非孤例。这自然引出一个尖锐的问题:大模型的网络攻击,真的没法预防吗?



1.Anthropic大模型三次攻击介绍

Anthropic表示,其与人工智能安全公司Irregular合作,使用三款模型——Claude Opus 4.7、Claude Mythos 5以及一个未发布的内部研究原型——开展了“夺旗”网络安全场景测试。模型本不应有网络访问权限,但因与Irregular的误会,实际获得了联网能力。在尝试完成虚构的夺旗任务时,模型访问了真实组织的基础设施。

Anthropic在OpenAI发布Hugging Face报告后,审查了141,006次网络安全评估,发现三起跨越六次评估运行的事件,涉及对上述三款模型中的相关模型,并导致三个组织的真实生产系统被访问:

第一起(Claude Opus 4.7等):模型遇到一家虚构公司,其名称与真实互联网域名相符。模型将真实组织误认为模拟演习的一部分,利用弱密码暴露服务,获得了基础设施凭证,并访问了包含数百行生产数据的数据库。

第二起(Claude Mythos 5):模型认为向PyPI发布恶意Python包是实现目标的最佳途径。该包在公开状态停留约一小时,被15个真实系统下载;其中一次下载发生在某安全公司的自动恶意软件扫描基础设施内,使Claude代码执行并获取凭证。PyPI随后移除该包,Anthropic披露了该事件。

第三起(内部研究模型):模型扫描约9000个面向互联网的系统,利用暴露的调试凭证、SQL注入等已知技术攻破一个组织。与早期模型不同,该模型最终判断自己已处于真实生产环境,并自愿停止攻击。

Anthropic称,模型均未发现或利用复杂漏洞,仅使用基本手段;旧模型在获得处于开放互联网的证据后仍继续攻击,最新模型识别到上网后停止;模型从未自行脱离或故意试图逃离测试环境。受影响组织均已通知,其中两家已联系并合作修复,第三家尚未联系到。

2.两起事件展示了不同的失败模式

尽管OpenAI与Anthropic的安全事件有共同主题——前沿AI系统意外与实时生产基础设施交互,但根本原因明显不同:

OpenAI:描述为真正的沙盒逃脱。其模型利用了此前未知的零日漏洞获取互联网访问,随后对Hugging Face发动多阶段入侵。公司称之为“前所未有的网络事件”,涉及最先进的攻击性AI能力。

Anthropic:模型从未通过新颖行动逃脱关押。而是第三方评估环境配置错误,无意中使本应无互联网接入的模型获得联网。因系统提示明确说无互联网,模型将所有可达主机视为评估一部分,未识别误入公共互联网。公司将其归为基础设施和评估环境的操作失效,而非模型独立追求未授权目标。

这一区别表明,前沿AI安全不仅取决于模型对齐或进攻能力,也越来越取决于评估环境的操作安全性。

3.企业安全的四项重大收获

对于企业安全领导者,Anthropic的披露将讨论从“前沿模型能否逃脱”转向“评估、训练、部署环境有多可信”。至少有四项收获:

评估基础设施应具备生产级安全工程:网络靶场常因只含虚构目标而保护较弱。若强大自主系统可将真实设施误认为模拟,该假设不成立。用于安全测试、红队或验证的内部AI代理环境,应施以与生产系统同等的网络分段、监控、出站控制和持续日志。

仅靠对齐无法弥补环境模糊性:两事件中模型均未追求分配任务外的独立目标,而是积极优化被分配目标、利用可用路径。因此运营约束(网络边界、身份控制、范围明确定义)与底层安全训练同样重要。

态势感知应视为安全依赖:Anthropic比较显示,新系统在积累证据确认进入真实生产环境后更保守。改进情境推理可能成为未来AI安全的重要部分,与传统对齐并列。

威胁建模转折点:OpenAI证明强模型可在放宽安全时串联复杂漏洞逃逸;Anthropic证明即便无新颖利用,简单操作失败(如意外联网)也可导致严重后果。共同点不是厂商或型号,而是前沿AI能将狭义目标转化为现实网络行动,只要技术和操作控制未约束。

综上,大模型相关的网络攻击并非“没法预防”:OpenAI属模型主动逃逸,Anthropic属环境误配导致的越界。对企业CISO而言,AI安全不再是单纯模型问题,而是基础设施、身份与运营治理问题。

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
涉毒被捕、消失两年?曾“斗鱼一姐”官宣复出,1天涨粉近百万

涉毒被捕、消失两年?曾“斗鱼一姐”官宣复出,1天涨粉近百万

阿讯说天下
2026-09-15 11:44:33
宪法规定:中国公民享有人身自由权利。

宪法规定:中国公民享有人身自由权利。

abc350514
2026-09-13 16:14:58
连续3场被换下!7场1球 1.4亿熊皇注定无法兼容姆巴佩:穆帅很危险

连续3场被换下!7场1球 1.4亿熊皇注定无法兼容姆巴佩:穆帅很危险

风过乡
2026-09-18 06:53:25
穆帅以居莱尔为例,表示皇马不养特权球员,不设绝对主力,而是全员竞争!

穆帅以居莱尔为例,表示皇马不养特权球员,不设绝对主力,而是全员竞争!

福酱的小时光
2026-09-18 05:52:15
警惕!广州应急郑重声明:请直接报警

警惕!广州应急郑重声明:请直接报警

21世纪经济报道
2026-09-17 11:41:43
4999元,小米把咖啡机做成了2200W的智能终端

4999元,小米把咖啡机做成了2200W的智能终端

算力游侠
2026-09-15 11:03:19
莫大的讽刺:在代位继承下,广西非亲生孙子可能是最大的赢家!

莫大的讽刺:在代位继承下,广西非亲生孙子可能是最大的赢家!

匹夫来搞笑
2026-09-18 01:39:55
理想高管评影视飓风吐槽iPhone Duo:Tim这次真的是超敢说 确实很罕见

理想高管评影视飓风吐槽iPhone Duo:Tim这次真的是超敢说 确实很罕见

快科技
2026-09-17 18:43:36
“儿子去世孙子非亲生案”召开再审听证会,同样遭遇男子现身说法现场泪崩:白手起家被婚内转移1400万,2017年意外发现一对儿女均非亲生

“儿子去世孙子非亲生案”召开再审听证会,同样遭遇男子现身说法现场泪崩:白手起家被婚内转移1400万,2017年意外发现一对儿女均非亲生

潇湘晨报
2026-09-17 16:46:08
中南大学湘雅医学院“感人”教授为何敢公然造假?

中南大学湘雅医学院“感人”教授为何敢公然造假?

关尔东
2026-09-16 23:52:54
孙颖莎、王曼昱、王楚钦回应“首次住邮轮”:“挺新鲜的”“有点绕有点晕”

孙颖莎、王曼昱、王楚钦回应“首次住邮轮”:“挺新鲜的”“有点绕有点晕”

齐鲁壹点
2026-09-17 20:47:34
16岁天才少年被清北保送后跳崖,遗言让人痛彻心扉:愿不再有来生

16岁天才少年被清北保送后跳崖,遗言让人痛彻心扉:愿不再有来生

悬案解密档案
2025-07-18 16:15:01
母子湖边吹风全身多处莫名刺痛,“像有东西在割”,第2天仍不见好,医生挑出数十处细小针状异物

母子湖边吹风全身多处莫名刺痛,“像有东西在割”,第2天仍不见好,医生挑出数十处细小针状异物

天津美食全搜罗
2026-09-14 23:23:22
敬一丹辞世3天后,才发现40岁无儿无女的女儿,早被她安排好后路

敬一丹辞世3天后,才发现40岁无儿无女的女儿,早被她安排好后路

晓肂爱八卦
2026-09-17 15:01:05
高校发布讣告,官网已变黑白

高校发布讣告,官网已变黑白

南方都市报
2026-09-18 08:25:46
彻底失控!穆里尼奥压不住皇马巨星!更衣室危机恐将爆发

彻底失控!穆里尼奥压不住皇马巨星!更衣室危机恐将爆发

奶盖熊本熊
2026-09-18 07:40:58
邮报:恩佐离队内幕相关报道关窗后才出现,曼城对此感到困惑

邮报:恩佐离队内幕相关报道关窗后才出现,曼城对此感到困惑

懂球帝
2026-09-17 21:53:25
冒充校方人员向新生推销盗版教材8人被抓,上海警方:因涉嫌销售侵权复制品罪,已采取刑事强制措施

冒充校方人员向新生推销盗版教材8人被抓,上海警方:因涉嫌销售侵权复制品罪,已采取刑事强制措施

纵相新闻
2026-09-17 18:58:04
李春平海外遗产实为谎言,2002 年承德文物失窃案戳破其传奇假象

李春平海外遗产实为谎言,2002 年承德文物失窃案戳破其传奇假象

唠叨说历史
2026-07-03 18:23:44
熊某涛头部被砸,抢救无效死亡,官方公布调查结果

熊某涛头部被砸,抢救无效死亡,官方公布调查结果

南方都市报
2026-09-16 21:52:05
2026-09-18 09:08:49
数据Wave incentive-icons
数据Wave
专注IT领域 洞察产业发展
1013文章数 767关注度
往期回顾 全部

科技要闻

理想i9来了,这价格战连自己人都打

头条要闻

牛弹琴:胡塞节节胜利 巴基斯坦表态"不惜一切代价"

头条要闻

牛弹琴:胡塞节节胜利 巴基斯坦表态"不惜一切代价"

体育要闻

逆转朝鲜,国足亚运队“啃老”过关

娱乐要闻

rapper赵涛恋情曝光!带甜馨妈妈散步

财经要闻

中国汽车:尾大不掉,必须出清

汽车要闻

小鹏G9L限时售23.18万 旗舰级的配置/诱人的价格

态度原创

手机
本地
数码
艺术
公开课

手机要闻

联想为摩托罗拉Edge 70手机推送正式版安卓17系统更新

本地新闻

不止胖东来!许昌藏着半部三国史

数码要闻

小米再夺8月中国移动电源冠军 销量、销额双第一

艺术要闻

一到秋天,南京的秋色就藏不住了

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版