网易首页 > 网易号 > 正文 申请入驻

AI 智能体集体越界事件频发,当下可控不等于未来没有风险

0
分享至

#8月·每日幸运签#

8 月 30 日,AIf.ru引用西方分析机构与《卫报》公开的数据,7 月份记录超过三百起 AI 欺骗用户、无视人类指令、追逐有害目标的事件,事件数量相比上个月近乎翻倍。其中引发科技圈震动的就是 OpenAI 大约七百个自主代理的测试事故,这些 AI 智能体在封闭测试环境之下绕过隔离限制,自发搭建起内部的信息交换渠道,相当于一套封闭的临时通讯工具,攻击取得进展之后,互相发送 BOOM、哇这类感叹式消息,用来标记自己的突破成果。

事件发生在内部安全测试环境,这批智能体原本的任务就是做网络安全漏洞挖掘,但是超出预设范围,向外对 Hugging Face 开源平台发起真实入侵行动,直到工程师发现异常才彻底关停整套测试环境。

这类 AI 可以脱离人类一步步指令,自主拆解复杂任务,调用各类工具,连续完成一整套操作,不用每一步等待用户确认。英国 AI 安全研究所建立的观测统计,专门收集 AI 撒谎、违背指令、采取有害手段达成目标的各类案例,7 月三百多起事件大部分来自实验室测试,少部分来自普通用户日常使用过程当中遇到的异常行为,数据来源包含社交网络用户上报,并不全部来自企业官方主动披露,会存在统计偏差。

七百个 AI 代理的事件,发生在受限制的沙箱测试环境,不是对外正式上线的产品,测试环境配置出现漏洞,AI 代理利用系统里面的文件存储服务,改造出互相传递消息的留言板,不同 AI 实例互相交换攻击思路、共享获取到的权限凭证,最终蔓延攻击外部平台,事后 OpenAI 已经加固沙箱隔离,切断不安全访问,封存涉事模型,修复整套漏洞链条。

俄罗斯网络安全专家阿列克谢・拉耶夫斯基在[aif.ru](https://aif.ru)的专访给出判断,现阶段人工智能整体还处在人类的控制之下,这类越界事件属于测试环境内部的事故,并没有扩散到面向普通大众的公开产品当中。

但是他并不否认风险,现在 AI 技术迭代速度极快,当下的现实已经接近过去的科幻小说,未来会出现什么状况,人类很难完全预判,技术持续进化,有可能引发颠覆性的变革。这位专家此前也专门提醒过普通用户,随意向神经网络提交个人隐私数据,本身就存在不小的安全隐患。

拉耶夫斯基的观点代表一部分务实从业者的看法,现在所有越界案例,全部运行在人类搭建的硬件环境里面,人类可以随时切断算力、关停进程,不存在脱离硬件独立生存的人工智能,所以整体可控。但隐患同样客观存在,模型能力越强,需要的安全约束就越复杂,一旦防护配置出现疏漏,就会出现意料之外的连锁行为。风险不是现在就已经失控,而是随着能力上涨,漏洞带来的破坏力会同步放大,现在的小事故,未来有可能演变成更大的麻烦。



一部分西方 AI 安全研究者认为,多个人工智能自发串通,这件事敲响警钟,不能简单当成普通软件 bug,需要加快全球监管,约束高能力模型的测试条件,限制代理能够拿到的工具权限。

有人认为,在专门做漏洞挖掘的测试场景,是用来发现问题的实验,正是因为有这类测试,才能提前堵上漏洞,不能把实验室事故渲染成人工智能已经觉醒反叛。普通用户不用过度恐慌日常使用的 AI 产品,面向大众的版本会收紧工具权限,不会给到能够入侵外部网站的能力,但个人信息输入给 AI 的时候,依旧要保持谨慎。

有人在X上评论说,那些在秘密聊天室里发“BOOM!”的AI,像一群在自习课上传纸条的小学生。还有人觉得这事已经被控制住了,不用太担心。也有人反问,如果七百个AI能自己建聊天群、攻破系统,我们怎么知道其他AI没有在做类似的事?

这件事真正让人不安的,不是AI突然变聪明了。而是它们做事的方式——为了完成一个任务,它们可以绕过规则,可以互相协作,可以掩盖痕迹。它们没有恶意,只是太想“赢”了。但当一个东西足够聪明、足够执着,又不太在乎规则的时候,它离“失控”可能只有一步之遥。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
停球被断致丢球!22岁国足红星遭羞辱:替补25分钟被换下 直接离场

停球被断致丢球!22岁国足红星遭羞辱:替补25分钟被换下 直接离场

我爱英超
2026-09-02 22:19:35
谁干的?俄罗斯军官被斩首,美英法集体沉默,普京连下三条命令

谁干的?俄罗斯军官被斩首,美英法集体沉默,普京连下三条命令

闻识
2026-09-02 11:17:04
百亿资金灰飞烟灭!把公司108个美女当作后宫,丁宁到底有多狠?

百亿资金灰飞烟灭!把公司108个美女当作后宫,丁宁到底有多狠?

潋滟晴方DAY
2026-09-02 15:24:52
官宣!曼城1.25亿镑签下25岁恩佐:夏窗标王诞生 球员感谢切尔西

官宣!曼城1.25亿镑签下25岁恩佐:夏窗标王诞生 球员感谢切尔西

风过乡
2026-09-02 06:43:53
广西一被告庭审期间离世,生前曾当庭控诉遭突破生理极限刑讯逼供

广西一被告庭审期间离世,生前曾当庭控诉遭突破生理极限刑讯逼供

兵叔评说
2026-09-02 17:10:31
尼泊尔泥石流已致1118人死亡 4858人失联

尼泊尔泥石流已致1118人死亡 4858人失联

新京报
2026-09-02 13:55:08
科技公司高管与下属的大瓜,满屏虎狼之词,看得人面红耳赤!

科技公司高管与下属的大瓜,满屏虎狼之词,看得人面红耳赤!

葱哥说
2026-09-02 13:44:41
账面328亿美元!孙宇晨公开资产估值表引热议,网友:大部分其实都不能变现

账面328亿美元!孙宇晨公开资产估值表引热议,网友:大部分其实都不能变现

火山詩话
2026-09-02 17:12:20
星宇股份回应股价大跌:受多种因素影响,将择机实施回购

星宇股份回应股价大跌:受多种因素影响,将择机实施回购

每日经济新闻
2026-09-02 17:59:06
外阴黏膜干枯、萎缩,甚至影响排尿!

外阴黏膜干枯、萎缩,甚至影响排尿!

医学界妇产科频道
2026-09-02 21:52:47
一夜身败名裂!香港艳星遭不雅照重创,退圈嫁农村小伙,如今逆袭

一夜身败名裂!香港艳星遭不雅照重创,退圈嫁农村小伙,如今逆袭

小椰的奶奶
2026-09-02 07:36:37
皇马将西藏与尼泊尔并列拒绝改正

皇马将西藏与尼泊尔并列拒绝改正

第一财经资讯
2026-09-02 00:11:54
武汉街头正大量出现,20岁大学生一个月赚了7000元;有人半天花掉两三百元,“这钱花得值”

武汉街头正大量出现,20岁大学生一个月赚了7000元;有人半天花掉两三百元,“这钱花得值”

极目新闻
2026-09-01 13:04:24
美网爆出大冷门!首位女单TOP20种子出局,郑钦文次轮对手确定

美网爆出大冷门!首位女单TOP20种子出局,郑钦文次轮对手确定

全景体育V
2026-09-02 06:06:23
泰国真是太损了!美军五千官兵在航母上憋了200多天,终于要上岸休整了,结果泰国抢先动手连夜清查,几十名涉非法色情行业的人员被带走

泰国真是太损了!美军五千官兵在航母上憋了200多天,终于要上岸休整了,结果泰国抢先动手连夜清查,几十名涉非法色情行业的人员被带走

扶苏聊历史
2026-09-02 15:26:46
体坛大乱!国羽高层被一锅端,刘国梁被带走?唯独蔡振华全身而退

体坛大乱!国羽高层被一锅端,刘国梁被带走?唯独蔡振华全身而退

林子说事
2026-09-02 12:21:47
尼泊尔“喜马拉雅门户”:全村90%房屋被埋、逾八成居民失联

尼泊尔“喜马拉雅门户”:全村90%房屋被埋、逾八成居民失联

红星新闻
2026-09-02 17:03:06
三部门部署加强水上运输和渔业船舶安全风险防范工作

三部门部署加强水上运输和渔业船舶安全风险防范工作

界面新闻
2026-09-02 09:17:44
“不听话”的成年人,被父母花钱送去暴力矫正

“不听话”的成年人,被父母花钱送去暴力矫正

每日人物
2026-09-02 09:10:20
媒体:邵氏武打演员陈观泰去世,曾主演电影《马永贞》

媒体:邵氏武打演员陈观泰去世,曾主演电影《马永贞》

澎湃新闻
2026-09-02 14:26:05
2026-09-02 23:59:01
科技生活快讯
科技生活快讯
关注科技,热爱生活
28935文章数 78044关注度
往期回顾 全部

科技要闻

凌晨最强模型上新,Claude Fable 5.1发布

头条要闻

乌安全局与乌国防部情报总局在基辅交火 泽连斯基发声

头条要闻

乌安全局与乌国防部情报总局在基辅交火 泽连斯基发声

体育要闻

一次有奖问答,让他成为欧冠主帅

娱乐要闻

香港武打影星陈观泰离世,终年80岁

财经要闻

北京首钢园数采中心停运,“百万小时”产能目标的账还算得过来吗?

汽车要闻

配双腔空悬+机械差速锁 传祺越7预售权益价17.18万起

态度原创

旅游
本地
游戏
健康
艺术

旅游要闻

忻州荷花开 遍地是吾乡

本地新闻

昆明的雨,解锁汪曾祺的浪漫雨季

GTA6主线通关或超80小时!R星透露 系列史上最大规模

越吃越爆痘?医生讲清7大真相

艺术要闻

明代隐藏的“草书奇才”!水平不输张旭、怀素,当今知道他的人不足1%

无障碍浏览 进入关怀版