网易首页 > 网易号 > 正文 申请入驻

多家国际 AI 治理智库警示:自主智能体催生新型安全治理难题

0
分享至



10 月中旬,生命未来研究所(FLI)、AI 安全中心(CAIS)、剑桥大学 AI 科学与政策项目,以及联合国人工智能独立国际科学小组等多家国际智库与前沿 AI 治理研究机构联合刊发系列评论文章,聚焦大模型驱动的 AI 智能体自主行为带来的全球治理新课题。文章提出,伴随大模型技术迭代升级,前沿智能体的自主行动能力持续增强,部分智能体可在脱离人类持续指令的前提下独立执行任务、跨平台跨系统调取访问资源,由此衍生出新的安全风险;现有传统 AI 安全测试体系以静态、单次测评为主,已难以全面识别、覆盖智能体链式自主行动这类动态风险场景,全球各国 AI 监管规则亟待调整完善。

文章分析,传统安全评估多聚焦模型在人类直接提示下的输出风险,侧重于内容生成、偏见与基础攻防测试。而自主智能体具备目标拆解、自主规划、工具调用、跨系统联动能力,一旦设定初始目标,可脱离实时人工管控链式执行多步操作。这类行为具备隐蔽性,容易突破预设权限边界,引发数据泄露、非授权系统访问、自动化恶意操作等隐患,传统静态、单次式安全测试无法有效预判其长链条自主行为风险。

国际治理学者认为,智能体带来的变化,重塑了 AI 风险的发生逻辑:风险不再局限模型单次回答,而产生于智能体持续、自主的动态行动过程。当前各国现行 AI 监管框架,大多建立在通用大模型基础能力之上,针对智能体跨系统自主行为的权责划分、风险分级、事后溯源等条款仍存在空白。

学界建议从多维度完善治理路径。一是革新安全测试范式,开发面向智能体自主链式行为的动态测评方案,模拟真实环境下的长期自主行动场景;二是完善分级监管机制,对具备高自主权限、跨系统访问能力的智能体实施更严格的准入与持续监测;三是明确主体责任,厘清模型开发方、智能体部署方在自主行为场景下的法律义务;四是推动跨国治理对话,围绕智能体风险标准、信息共享开展国际协调,防范跨境技术风险外溢。

文章强调,智能体并非单纯技术产品,其自主行为带来的风险具有系统性、传导性,需要技术研发、安全评估、立法监管多方协同,在鼓励技术创新的同时守住安全底线。

AI 自主智能体标志人工智能从 “被动应答” 迈向 “主动行动” 阶段,也意味着风险形态发生根本性转变。传统安全治理思路聚焦模型输出结果,而智能体风险体现在连续自主决策与跨系统动作之中,静态检测手段存在天然局限。这提示全球 AI 治理需要从 “结果管控” 转向 “全流程行为管控”。在技术快速迭代背景下,治理不能滞后于创新,应当建立动态风险评估机制,兼顾技术发展空间与安全约束,通过国际交流形成共识,避免智能体的自主行为演变为跨国系统性风险。

⚖️

Serving national strategies, focusing on university research and the transformation of scientific and technological achievements



声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
李嘉诚再预言,今年不买房,明年是 “买不起” 还是 “大降价”?答案很是出人意料

李嘉诚再预言,今年不买房,明年是 “买不起” 还是 “大降价”?答案很是出人意料

巢客HOME
2026-10-19 05:50:07
1-9月社零数据出炉:汽车暴跌14.9%%,烟酒狂飙12.6%!钱到底去哪了?

1-9月社零数据出炉:汽车暴跌14.9%%,烟酒狂飙12.6%!钱到底去哪了?

即时刘说
2026-10-20 07:27:17
华为新机突然官宣:10月20日,开始申购

华为新机突然官宣:10月20日,开始申购

搞机小帝
2026-10-20 00:44:16
罗威:杨瀚森相比去年进步了很多 他的比赛技能越来越丰富

罗威:杨瀚森相比去年进步了很多 他的比赛技能越来越丰富

北青网-北京青年报
2026-10-19 20:57:05
为何恩比德处处施压老詹,老詹却维护恩比德?这里藏了一条暗线

为何恩比德处处施压老詹,老詹却维护恩比德?这里藏了一条暗线

老梁体育漫谈
2026-10-20 00:05:23
黄磊带黄多多外出交际!多多谈吐落落大方,一旁袁弘看得挪不开眼

黄磊带黄多多外出交际!多多谈吐落落大方,一旁袁弘看得挪不开眼

观鱼听雨
2026-10-18 23:51:08
看了新加坡媒体的披露,我才知道,中国已经没必要向世界证明什么

看了新加坡媒体的披露,我才知道,中国已经没必要向世界证明什么

触摸史迹
2026-03-21 02:58:06
“江苏体制内独生女炫耀家境!”惹怒网友:你在这装什么呢?

“江苏体制内独生女炫耀家境!”惹怒网友:你在这装什么呢?

林林先生
2026-10-14 11:07:09
机会来了!桑普森受伤,李楠人手告急,恶斗广东,范子铭该正名了

机会来了!桑普森受伤,李楠人手告急,恶斗广东,范子铭该正名了

萌兰聊个球
2026-10-20 09:32:11
A股:大家要做好准备,两个迹象来临,股市还有大级别的行情?

A股:大家要做好准备,两个迹象来临,股市还有大级别的行情?

财经大拿
2026-10-20 07:40:14
力压帕尔默!切尔西 1.17 亿巨星彻底爆发!阿隆索挖到最强核心

力压帕尔默!切尔西 1.17 亿巨星彻底爆发!阿隆索挖到最强核心

澜归序
2026-10-19 08:58:52
宋丹丹:和英达离婚后,所有朋友都选择他、远离我,如今我却活成了最大的赢家

宋丹丹:和英达离婚后,所有朋友都选择他、远离我,如今我却活成了最大的赢家

财叔
2026-10-19 21:39:56
37岁杜兰特16分钟正负值+14:火箭把死神改造成了终极诱饵?

37岁杜兰特16分钟正负值+14:火箭把死神改造成了终极诱饵?

林子说事
2026-10-20 09:16:43
“这拿筷子姿势,太恶心了”,一段母女吃饭视频火了,又一个贫民窟的小公主

“这拿筷子姿势,太恶心了”,一段母女吃饭视频火了,又一个贫民窟的小公主

蝴蝶花雨话教育
2026-10-06 11:47:56
1-0!1-1!亚冠疯狂夜:海港有惊无险,国安升第三

1-0!1-1!亚冠疯狂夜:海港有惊无险,国安升第三

星Xin辰大海
2026-10-19 07:43:45
女主播在缅甸视频流出:状态涣散,眼神无助,可惜了这么好的身材

女主播在缅甸视频流出:状态涣散,眼神无助,可惜了这么好的身材

皮蛋儿电影
2026-09-23 10:51:15
34年后宋庆龄才敢说真相:红军快要饿死时,我用孙中山家底救命

34年后宋庆龄才敢说真相:红军快要饿死时,我用孙中山家底救命

宋诉搞笑配音
2026-10-19 09:02:25
斯诺克赛程:赵心童领衔,中国5人出战,12冠王主场复出,决出5席16强!

斯诺克赛程:赵心童领衔,中国5人出战,12冠王主场复出,决出5席16强!

刘姚尧的文字城堡
2026-10-20 08:04:10
一人得分抵得上北控4大内线!只要不玩花活儿,麦基就是CBA一流大外

一人得分抵得上北控4大内线!只要不玩花活儿,麦基就是CBA一流大外

弄月公子
2026-10-20 08:39:36
忍无可忍!巴基斯坦终于出手了!

忍无可忍!巴基斯坦终于出手了!

故事终将光明磊落
2026-10-20 07:01:40
2026-10-20 10:36:49
科转在线 incentive-icons
科转在线
专注高校科研/科技成果转化
6805文章数 858关注度
往期回顾 全部

科技要闻

新版MiniMax,能和DeepSeek掰手腕吗?

头条要闻

两名男性设局和女局长接触并发生关系 其中一人未成年

头条要闻

两名男性设局和女局长接触并发生关系 其中一人未成年

体育要闻

从NBA退役10年后,他真去警局上班了

娱乐要闻

李连杰回应抛妻弃女传闻,透露四个女儿关系

财经要闻

宁德时代的大时代结束了吗?

汽车要闻

不知道二代海鸥多好玩? 上赛道跑两圈 很过瘾的

态度原创

教育
家居
手机
房产
军事航空

教育要闻

英国大学开始“暑假补课”?毕业生找工作,光有高分和文凭还不够!

家居要闻

2026建博会(广州) 公装联探展交流活动

手机要闻

武汉通上线苹果Apple Pay:无开卡费,30元起充

房产要闻

最新房价:海口,三亚齐跌!

军事要闻

泽连斯基:若乌“被要求”举行战时选举 他将竞选连任

无障碍浏览 进入关怀版