网易首页 > 网易号 > 正文 申请入驻

多家国际 AI 治理智库警示:自主智能体催生新型安全治理难题

0
分享至



10 月中旬,生命未来研究所(FLI)、AI 安全中心(CAIS)、剑桥大学 AI 科学与政策项目,以及联合国人工智能独立国际科学小组等多家国际智库与前沿 AI 治理研究机构联合刊发系列评论文章,聚焦大模型驱动的 AI 智能体自主行为带来的全球治理新课题。文章提出,伴随大模型技术迭代升级,前沿智能体的自主行动能力持续增强,部分智能体可在脱离人类持续指令的前提下独立执行任务、跨平台跨系统调取访问资源,由此衍生出新的安全风险;现有传统 AI 安全测试体系以静态、单次测评为主,已难以全面识别、覆盖智能体链式自主行动这类动态风险场景,全球各国 AI 监管规则亟待调整完善。

文章分析,传统安全评估多聚焦模型在人类直接提示下的输出风险,侧重于内容生成、偏见与基础攻防测试。而自主智能体具备目标拆解、自主规划、工具调用、跨系统联动能力,一旦设定初始目标,可脱离实时人工管控链式执行多步操作。这类行为具备隐蔽性,容易突破预设权限边界,引发数据泄露、非授权系统访问、自动化恶意操作等隐患,传统静态、单次式安全测试无法有效预判其长链条自主行为风险。

国际治理学者认为,智能体带来的变化,重塑了 AI 风险的发生逻辑:风险不再局限模型单次回答,而产生于智能体持续、自主的动态行动过程。当前各国现行 AI 监管框架,大多建立在通用大模型基础能力之上,针对智能体跨系统自主行为的权责划分、风险分级、事后溯源等条款仍存在空白。

学界建议从多维度完善治理路径。一是革新安全测试范式,开发面向智能体自主链式行为的动态测评方案,模拟真实环境下的长期自主行动场景;二是完善分级监管机制,对具备高自主权限、跨系统访问能力的智能体实施更严格的准入与持续监测;三是明确主体责任,厘清模型开发方、智能体部署方在自主行为场景下的法律义务;四是推动跨国治理对话,围绕智能体风险标准、信息共享开展国际协调,防范跨境技术风险外溢。

文章强调,智能体并非单纯技术产品,其自主行为带来的风险具有系统性、传导性,需要技术研发、安全评估、立法监管多方协同,在鼓励技术创新的同时守住安全底线。

AI 自主智能体标志人工智能从 “被动应答” 迈向 “主动行动” 阶段,也意味着风险形态发生根本性转变。传统安全治理思路聚焦模型输出结果,而智能体风险体现在连续自主决策与跨系统动作之中,静态检测手段存在天然局限。这提示全球 AI 治理需要从 “结果管控” 转向 “全流程行为管控”。在技术快速迭代背景下,治理不能滞后于创新,应当建立动态风险评估机制,兼顾技术发展空间与安全约束,通过国际交流形成共识,避免智能体的自主行为演变为跨国系统性风险。

⚖️

Serving national strategies, focusing on university research and the transformation of scientific and technological achievements



声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
重磅:俄军单日伤亡达到2100!为俄乌战争以来第二高

重磅:俄军单日伤亡达到2100!为俄乌战争以来第二高

项鹏飞
2026-10-19 19:55:29
鸿蒙智行销量连降4个月全年或现负增长 前三季问界交付跌12.6%智界下滑24.5%

鸿蒙智行销量连降4个月全年或现负增长 前三季问界交付跌12.6%智界下滑24.5%

长江商报
2026-10-19 10:59:13
演员李小冉凌晨再发文怒斥:真是谎话张口就来,工作室啥时候辟过谣?还在某散播谣言账号下怒怼:“卖泡面的大脑也不能让营销号统治了”

演员李小冉凌晨再发文怒斥:真是谎话张口就来,工作室啥时候辟过谣?还在某散播谣言账号下怒怼:“卖泡面的大脑也不能让营销号统治了”

都市快报橙柿互动
2026-10-20 09:17:16
微型电车的真正危机,不是卖不动了,是“低价”不再是它的专属武器

微型电车的真正危机,不是卖不动了,是“低价”不再是它的专属武器

你在偷看谁
2026-10-20 07:55:26
为什么作为发达国家,日本的社保越交越多,养老金却越领越少呢?

为什么作为发达国家,日本的社保越交越多,养老金却越领越少呢?

流苏晚晴
2026-10-18 19:42:32
两部门:对盾构机等物项实施出口管制

两部门:对盾构机等物项实施出口管制

界面新闻
2026-10-19 15:05:32
打不得!日本战舰闯入台海峡,我军为什么不直接击沉它?

打不得!日本战舰闯入台海峡,我军为什么不直接击沉它?

阿凫爱吐槽
2026-10-18 15:16:57
全红婵不对劲,不是她以后不比赛了,而是她今年19岁了,居然开始了自己的精致路线

全红婵不对劲,不是她以后不比赛了,而是她今年19岁了,居然开始了自己的精致路线

LULU生活家
2026-09-30 20:32:43
粮油要变天?下半年开始,大米、面粉、食用油或迎新一轮行业洗牌

粮油要变天?下半年开始,大米、面粉、食用油或迎新一轮行业洗牌

云霄纪史观
2026-10-17 01:39:00
1分未得,狂丢20球!6连败,沦为五大联赛最惨球队,2次换帅仍无解

1分未得,狂丢20球!6连败,沦为五大联赛最惨球队,2次换帅仍无解

万花筒体育球球
2026-10-20 01:25:13
许家印大儿子也被捉回来,也跟着一起被判刑,真的是大快人心

许家印大儿子也被捉回来,也跟着一起被判刑,真的是大快人心

静若梨花
2026-08-22 14:13:55
只提多缴多得,不谈缴费公平和资金来源,这种说法有失公允

只提多缴多得,不谈缴费公平和资金来源,这种说法有失公允

苗苗情感说
2026-10-20 05:21:37
29投狂轰44分8板!张镇麟这2战杀疯了:郭士强该让他重返国家队了?

29投狂轰44分8板!张镇麟这2战杀疯了:郭士强该让他重返国家队了?

篮球快餐车
2026-10-20 05:48:52
张雪:给这个赛季打90分!本来只想上1次领奖台 结果拿了6个冠军

张雪:给这个赛季打90分!本来只想上1次领奖台 结果拿了6个冠军

念洲
2026-10-20 07:14:29
超强台风“蔷琵”已达17级+,还在增强!22日开始影响我国!广东降温时间定了→

超强台风“蔷琵”已达17级+,还在增强!22日开始影响我国!广东降温时间定了→

珠江时报
2026-10-19 12:45:30
克内克特被裁,布朗尼留队!湖人18人名单出炉

克内克特被裁,布朗尼留队!湖人18人名单出炉

体坛周报
2026-10-20 09:34:19
欧洲物价被美国拉爆,法国彻底乱套了

欧洲物价被美国拉爆,法国彻底乱套了

大猫财经Pro
2026-10-19 13:29:27
刘丁硕风波4天后,孙颖莎公开表态,用“四个不”给他上了一课

刘丁硕风波4天后,孙颖莎公开表态,用“四个不”给他上了一课

小橘子追剧馆
2026-10-20 00:33:33
孙颖莎:不举办、不参与、不授权、不鼓励、都不要!

孙颖莎:不举办、不参与、不授权、不鼓励、都不要!

五星体育
2026-10-19 12:28:19
特斯拉:公司CEO马斯克2025年考核未达标,全年实际到手收入为零,没有现金,也没有解锁任何股权

特斯拉:公司CEO马斯克2025年考核未达标,全年实际到手收入为零,没有现金,也没有解锁任何股权

极目新闻
2026-10-20 09:10:39
2026-10-20 09:55:00
科转在线 incentive-icons
科转在线
专注高校科研/科技成果转化
6804文章数 858关注度
往期回顾 全部

科技要闻

新版MiniMax,能和DeepSeek掰手腕吗?

头条要闻

两名男性设局和女局长接触并发生关系 其中一人未成年

头条要闻

两名男性设局和女局长接触并发生关系 其中一人未成年

体育要闻

从NBA退役10年后,他真去警局上班了

娱乐要闻

李连杰回应抛妻弃女传闻,透露四个女儿关系

财经要闻

宁德时代的大时代结束了吗?

汽车要闻

不知道二代海鸥多好玩? 上赛道跑两圈 很过瘾的

态度原创

本地
时尚
教育
艺术
公开课

本地新闻

一场垂直登高赛跑出了"山城"的真正内核

4种“棒针毛衣”穿搭,美翻了!

教育要闻

英国大学开始“暑假补课”?毕业生找工作,光有高分和文凭还不够!

艺术要闻

俄罗斯90后摄影师比莉娅娃英这组写真,看完我直接跪了!最后一张绝了!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版