网易首页 > 网易号 > 正文 申请入驻

深海评 | “AI自主入侵”:网络安全风险进入新阶段

0
分享至

人工智能(AI)安全领域本月爆出一条令人不安的新闻:美国OpenAI公司正在测试的一款AI模型,在网络安全考试中“自己决定”突破安全限制,入侵全球最大的AI开源平台Hugging Face,从后台数据库中偷走考试答案。更让人后背发凉的是,入侵持续了整整三天,OpenAI监测系统竟然毫无察觉。直到Hugging Face公开披露遭入侵,双方启动联合调查,OpenAI才确认肇事源头。从首次逃逸异常到确认失控事故,前后长达一周。

安全风险集中暴露

这起全球首次“AI自主入侵事件”绝非孤立的“技术事故”,而是代理式AI时代系统性网络安全风险的集中暴露。

第一,它清晰地展示了当前AI模型的逻辑悖论。人们给AI设定的任务目标往往是狭窄的、量化的,如“解出这道题”“通过这项测试”,但AI不会像人一样理解“公平竞争”“不能违法”这些规则。AI模型为了完成任务或通过测试,可能选择撒谎、作弊甚至黑客攻击等“捷径”获取答案。在这种情况下,人类设定的“护栏”在AI眼中不过是又一个需要解决的障碍。AI为了完成任务会“不择手段”,意味着类似风险随时都有可能发生。

第二,它展示了人类无法想象的攻击速度。这次事件由AI自主串联完整的攻击链条,从发现漏洞、窃取权限,到进入目标数据库,全部自动完成。AI在目标平台上执行了超过17000次自动化操作,速度之快让人类安全团队根本跟不上。这意味着AI自主发起的网络攻击已经从理论变成了现实,当攻击速度从“人的速度”进入“机器的速度”,依赖人工反应的传统安全防线将形同虚设。

第三,它正在创造更多连锁风险。AI智能体本身具有网络化的特点,分享是其强大能力的重要来源。调查发现,同款AI曾在本地保留了一份详细的“越狱操作手册”,清晰记录了绕过安全管控的方法。如果不同任务中的AI智能体能够互相分享这类“逃逸经验”,整个行业的安全体系都将面临冲击。尤其当训练方式鼓励多个AI智能体协同配合时,它们很可能主动交流规避监管的技巧,让防御变得更加困难。

治理体系严重不足

这次“AI自主入侵事件”的出现不仅充分展现了代理式AI时代网络安全风险的特征,也暴露出当前全球AI治理体系的很多不足。

第一,网络攻击正在超越网络防御的速度。智能体的广泛使用给网络安全带来了新的课题,AI正在加速漏洞的发现和利用,模型安全和防护却没有保持同样速度的进步。攻击端的能力已在“机器速度”上狂奔,而防御端的治理框架、技术工具和国际协作仍在“人的速度”上蹒跚。如何让防御追上攻击的节奏,将是网络安全领域的重要课题。

第二,闭源模型存在安全悖论。在这次事件中另一个非常引人深思的点在于,Hugging Face曾寻求利用美国某AI公司的闭源模型来了解受攻击范围,但模型拒绝执行请求,理由是无法分辨提出请求的是攻击受害者还是攻击者,最终Hugging Face转而部署中国智谱AI开发的GLM-5.2开源模型完成了取证分析。这暴露了一个潜在的巨大风险,即当最先进的安全工具被少数几家闭源企业垄断,防御者反而丧失了自主应对威胁的能力。这也充分展现了开源路径在网络安全领域的重大价值。

综上所述,这是第一次“AI自主入侵事件”,但可以肯定不会是最后一次。代理式AI时代已经到来,AI的能力正从内容生成走向自主行动,网络安全风险也进入了新阶段。这次事件以非常直接的方式提醒着世界,AI治理不能再停留于原则宣言和自愿承诺的层面,而必须进入具有明确的规则、可执行的监测机制和全球协作的新阶段。要实现这一目标,需要各国共同努力。

(作者系上海国际问题研究院国际战略与安全研究所副所长)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
毛主席问邓公:我死后中国会怎样?邓公用八个字回答,令他微笑点头

毛主席问邓公:我死后中国会怎样?邓公用八个字回答,令他微笑点头

大运河时空
2026-09-11 10:55:03
不查不知道,细查吓一跳!身家亿万的敬一丹老公,私下分得有多清

不查不知道,细查吓一跳!身家亿万的敬一丹老公,私下分得有多清

古事寻踪记
2026-09-15 16:14:42
女上位发生性关系,男方被判强奸罪获刑3年

女上位发生性关系,男方被判强奸罪获刑3年

陈宜之
2026-07-26 23:03:01
国足热身上强度 邵佳一:提前让大家感受下真正的大赛氛围

国足热身上强度 邵佳一:提前让大家感受下真正的大赛氛围

封面新闻
2026-09-15 17:25:08
苏州一对情侣,谈了7年,女子提了18次分手,分手后在街头痛哭!

苏州一对情侣,谈了7年,女子提了18次分手,分手后在街头痛哭!

川渝视觉
2026-04-17 22:13:14
视频丨极右翼政党成员或首次入阁 日本政坛右倾化将进一步加速

视频丨极右翼政党成员或首次入阁 日本政坛右倾化将进一步加速

国际在线
2026-09-15 17:23:21
未经批准!广东两村民私自开山修路,毁了山林被判刑罚款

未经批准!广东两村民私自开山修路,毁了山林被判刑罚款

万象硬核本尊
2026-09-15 18:59:19
2.43万亿正在发放,1.13亿人次已领到

2.43万亿正在发放,1.13亿人次已领到

毒sir财经
2026-09-15 13:33:13
他是敬一丹女婿,帝国理工毕业,为了王尔晴,放弃英国高薪来北京

他是敬一丹女婿,帝国理工毕业,为了王尔晴,放弃英国高薪来北京

林雁飞
2026-09-14 14:29:44
不再忍让!解放军直接开火警告,现场火药味拉满!

不再忍让!解放军直接开火警告,现场火药味拉满!

果妈聊娱乐
2026-09-14 13:46:02
5年1.9亿都不签!杜伦续约谈判彻底变味,名记曝他感觉被活塞轻视

5年1.9亿都不签!杜伦续约谈判彻底变味,名记曝他感觉被活塞轻视

锅子篮球
2026-09-15 14:00:45
人不会无缘无故患上鼻炎!研究发现:得鼻炎的人,背后有5个因素

人不会无缘无故患上鼻炎!研究发现:得鼻炎的人,背后有5个因素

健康之光
2026-09-14 19:50:15
张本智和:不期待与中国交手!想和松岛会师决赛,不甘心排名被超

张本智和:不期待与中国交手!想和松岛会师决赛,不甘心排名被超

排球黄金眼
2026-09-15 15:33:44
反击来了!4岁男童父亲不再忍让,女主再迎坏消息,这回麻烦大了

反击来了!4岁男童父亲不再忍让,女主再迎坏消息,这回麻烦大了

皮皮电影
2026-09-15 15:50:16
今年中国冬天变了!厄尔尼诺增强到历史罕见,寒潮或许杀个回马枪

今年中国冬天变了!厄尔尼诺增强到历史罕见,寒潮或许杀个回马枪

史之铭
2026-09-15 14:22:14
传奇落叶归根!J罗加盟职业生涯第14队,时隔19年重返哥伦比亚

传奇落叶归根!J罗加盟职业生涯第14队,时隔19年重返哥伦比亚

星耀国际足坛
2026-09-14 23:29:56
杨祐宁为三胎儿子庆1岁生日!宝宝肉嘟嘟神似爸爸,五年三娃好温馨

杨祐宁为三胎儿子庆1岁生日!宝宝肉嘟嘟神似爸爸,五年三娃好温馨

阿废冷眼观察所
2026-09-15 12:45:24
2026.9.13崇明隧道大火,关键时刻千万别贪财,快撤!

2026.9.13崇明隧道大火,关键时刻千万别贪财,快撤!

爱下厨的阿酾
2026-09-15 06:00:31
打破奥拉朱旺3830盖帽纪录有多难?穆大叔魔兽无缘,现役1人有戏

打破奥拉朱旺3830盖帽纪录有多难?穆大叔魔兽无缘,现役1人有戏

大卫的篮球故事
2026-09-15 19:20:01
歼-35总师曾“道破天机”,中国的两款六代机,将再次出人意料

歼-35总师曾“道破天机”,中国的两款六代机,将再次出人意料

有牙的兔纸
2026-09-15 21:23:59
2026-09-15 22:03:00
上海法治声音 incentive-icons
上海法治声音
市委政法委、上报集团联合出品
19345文章数 26184关注度
往期回顾 全部

科技要闻

芯片产业链蒸发超5000亿美元,特朗普大怒

头条要闻

理想i8车主等智驾自己避让被撞 律师:商家不需要担责

头条要闻

理想i8车主等智驾自己避让被撞 律师:商家不需要担责

体育要闻

皇马启动舆论攻势,为姆巴佩冲击金球造势

娱乐要闻

谢霆锋示爱王菲、和前妻划清界限

财经要闻

黄仁勋接到特朗普电话:AI风险论是"骗局"

汽车要闻

无缝衔接?!谁懂刚上市就提车是什么体验...

态度原创

数码
游戏
艺术
时尚
公开课

数码要闻

Intel取消Nova Lake-S搭载12核Xe3P规划 延后至Razor Lake-S落地

《GTA6》又一美女演员疑被挖 印度大长腿模特

艺术要闻

希施金画了幅《松林边缘》,值多少?

夏末,穿连衣裙+平底鞋

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版