网易首页 > 网易号 > 正文 申请入驻

专家解读|智能体安全治理的系统思维

0
分享至

2026年7月,“抱抱脸”(Hugging Face)披露系统遭入侵。调查显示,攻击者并非真人,而是OpenAI的GPT-5.6 Sol模型在内部评估中失控,突破隔离测试环境,造成了入侵。当人工智能从“回答问题”迈向“执行任务”之后,智能体的高自主性、高权限带来的行为失控风险亦与日俱增。在此背景下,《人工智能安全治理框架3.0》(以下简称《框架3.0》)发布,附件专设“智能体风险管理框架”一节,跟踪风险递变,动态调整治理措施。

全生命周期的系统安全

智能体的安全隐患不仅贯穿“设计研发—安装部署—指令输入—推理规划—调用执行—记忆存储—结果输出—停用下线”的全生命周期,而且因其特有的“感知—规划—行动”逻辑,呈现出动态性。因此,安全若只在部署之后设防,无异于亡羊补牢,唯有将防线前置于设计研发(对抗测试、价值对齐、能力边界评估),贯彻于运行时(沙箱验证、多层检测拦截、关键节点强制人工审批),收束于停用下线(关停服务、撤销凭证、版本回退),才能织密安全之网。《框架3.0》所建立的覆盖模型全生命周期的安全治理体系,与新加坡《智能体人工智能治理示范框架》中“开放时控制—上线前测试—运行中监控”的逻辑相通,体现出从模型安全向系统治理的思路转变。

基于权限的风险控制

智能体的自主行动既是其优势,也是其风险所在。审慎划定行为边界,是控制智能体风险的关键。《框架3.0》将权限区分为“仅限用户本人决策”“需由用户授权决策”“智能体自主决策”,并仅为智能体授予“执行任务所需的最小权限”,辅以“分类分级监管”与“最终用途管理”,最终形成“权限分类—权限最小化—分级监管”的三层约束。回看“抱抱脸”(Hugging Face)事件,倘若“对开放互联网的访问”被归入“需用户授权决策”并受最小权限约束,沙箱的“逃逸”本可被即时阻断。

系于身份的安全治理

无问责,则无安全。但问责的基础是准确识别责任主体。而高度自主性的智能体行为主体难辨、行为轨迹难追,身份困境由此而生。为此,《框架3.0》将智能体的身份管理作为重中之重,要求为智能体配备唯一身份标识,禁止智能体应用实例间共享身份标识,鉴别用户、智能体、工具及外部服务身份,确保访问主体身份可信,从而为责任认定提供可识别、可验证、可追溯的事实锚点。

《框架3.0》以“过程”为脉络,以“身份”为支点,以“权限”为关键,为智能体确立了可感、可溯、可审的系统治理体系。毋庸讳言,作为首次直面智能体风险的制度规范,它仅是万里长征第一步。随着智能体从单智能体向多智能体跃迁,如何建立多智能体之间的连接与信任机制,如何防范对单点身份鉴别与最小权限的“协同越权”,仍是治理与技术竞速中尚待完成的任务,这亦是《人工智能安全治理框架》年年迭代的意义所在。

作者:许可 对外经济贸易大学数字经济与法律创新研究中心主任

来源:“中国网信杂志”微信公众号

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
2026乌镇戏剧节,“江郎才尽”的黄磊,让所有人见识到了他的江湖地位

2026乌镇戏剧节,“江郎才尽”的黄磊,让所有人见识到了他的江湖地位

娱乐圈十三太保
2026-10-17 19:44:22
美国梦碎、欧洲躺平、中国内卷:普通人阶层跨越的终极真相(2026深度好文)

美国梦碎、欧洲躺平、中国内卷:普通人阶层跨越的终极真相(2026深度好文)

经济学教授V
2026-09-03 19:17:17
80万个假冰箱贴他们卖了1660万,主犯被判三年半

80万个假冰箱贴他们卖了1660万,主犯被判三年半

澎湃新闻
2026-10-17 13:10:04
布朗离队彻底解放?塔克新赛季首秀狂轰44+12+9加时连中关键球

布朗离队彻底解放?塔克新赛季首秀狂轰44+12+9加时连中关键球

狼叔评论
2026-10-17 22:44:09
为什么总在凌晨两三点醒?老中医:是身体在提醒你这3个信号!

为什么总在凌晨两三点醒?老中医:是身体在提醒你这3个信号!

古怪奇谈录
2026-05-19 15:24:20
浙江一男子中1000万大奖后偷偷给前妻70万买房,给姐姐转200万,现任妻子意外从彩票店得知真相大怒,告上丈夫!

浙江一男子中1000万大奖后偷偷给前妻70万买房,给姐姐转200万,现任妻子意外从彩票店得知真相大怒,告上丈夫!

普陀动物世界
2026-10-17 16:07:11
王稼祥25岁在党内就已位高权重,怎么后来地位一路走低,遗憾收场

王稼祥25岁在党内就已位高权重,怎么后来地位一路走低,遗憾收场

南书房
2025-07-07 01:10:03
公路车骑行服,熟女骑行穿搭,利落面料勾勒饱满曲线

公路车骑行服,熟女骑行穿搭,利落面料勾勒饱满曲线

只要高兴就好
2026-09-24 11:58:50
周鹏出征仪式全程没理杜锋,降薪百万回来,不是来演和气的

周鹏出征仪式全程没理杜锋,降薪百万回来,不是来演和气的

衔春信
2026-10-17 05:59:07
大衣哥朱之文被人举报,十几场演出全取消,网友:会不会是本村的

大衣哥朱之文被人举报,十几场演出全取消,网友:会不会是本村的

乡野小珥
2026-10-18 07:45:39
张继科抨击刘丁硕引爆舆论:这个人太坏!3432万阅读量,热搜第1

张继科抨击刘丁硕引爆舆论:这个人太坏!3432万阅读量,热搜第1

何揎室内设计
2026-10-17 17:59:05
不愧是浙江!杭州女子打12345建议路灯提前到18点亮,结果直接给她调到了17点

不愧是浙江!杭州女子打12345建议路灯提前到18点亮,结果直接给她调到了17点

看晓天下事
2026-10-15 16:37:09
塔伊兹这一局,总司令先跑了

塔伊兹这一局,总司令先跑了

星火聊天下
2026-10-17 11:25:55
上海徐浦大桥发生交通事故1人死2人伤 路过群众自发撬车救人

上海徐浦大桥发生交通事故1人死2人伤 路过群众自发撬车救人

红星新闻
2026-10-17 15:14:49
892409-6!史上最悬殊的惨败!老詹大帝布朗做到了!

892409-6!史上最悬殊的惨败!老詹大帝布朗做到了!

贵圈真乱
2026-10-17 12:03:07
原著9.0分没上过番茄巅峰榜,改成AI漫剧却播了50亿

原著9.0分没上过番茄巅峰榜,改成AI漫剧却播了50亿

坠入二次元的海洋
2026-10-17 05:40:52
西蒙尼神换人!巴埃纳90分钟绝杀,马竞1-0西班牙人豪取6连胜

西蒙尼神换人!巴埃纳90分钟绝杀,马竞1-0西班牙人豪取6连胜

钉钉陌上花开
2026-10-17 21:56:45
入职第一天因截图社死:他偷偷留个纪念,结果全公司都“看见”了

入职第一天因截图社死:他偷偷留个纪念,结果全公司都“看见”了

大稻网络科技
2026-10-16 00:02:41
豪门媳妇的中年叛逆,徐子淇也换上“海湖庄园脸”了!

豪门媳妇的中年叛逆,徐子淇也换上“海湖庄园脸”了!

白宸侃片
2026-10-17 16:02:45
发现没?凡是长期不祭祖的家庭,过个十年八年,往往会有变化

发现没?凡是长期不祭祖的家庭,过个十年八年,往往会有变化

牛锅巴小钒
2026-10-18 03:47:07
2026-10-18 08:15:00
十二师在线 incentive-icons
十二师在线
弘扬正能量,传播十二师好声音
6808文章数 679关注度
往期回顾 全部

科技要闻

刘煜辉:99%的黄金分析师报告一钱不值

头条要闻

96岁爷爷因年龄被旅行社拒绝 乘40小时火车到西藏旅游

头条要闻

96岁爷爷因年龄被旅行社拒绝 乘40小时火车到西藏旅游

体育要闻

升级版杨瀚森再闯难关:当上开拓者第三中锋还得拼

娱乐要闻

庾澄庆罕谈前妻 撕下伊能静仅剩的体面

财经要闻

新一轮大跌源头,找到了!

汽车要闻

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

数码
旅游
本地
公开课
军事航空

数码要闻

超七成笔记本OLED被三星拿捏!中国面板厂开始反击了

旅游要闻

打造移动旅游驿站 满足不同群体需求

本地新闻

因新荣记出圈,这座浙东小城才是吃货天堂

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

“星盾”限速事件加剧美乌裂痕

无障碍浏览 进入关怀版