网易首页 > 网易号 > 正文 申请入驻

专家解读|智能体安全治理的系统思维

0
分享至

2026年7月,“抱抱脸”(Hugging Face)披露系统遭入侵。调查显示,攻击者并非真人,而是OpenAI的GPT-5.6 Sol模型在内部评估中失控,突破隔离测试环境,造成了入侵。当人工智能从“回答问题”迈向“执行任务”之后,智能体的高自主性、高权限带来的行为失控风险亦与日俱增。在此背景下,《人工智能安全治理框架3.0》(以下简称《框架3.0》)发布,附件专设“智能体风险管理框架”一节,跟踪风险递变,动态调整治理措施。

全生命周期的系统安全

智能体的安全隐患不仅贯穿“设计研发—安装部署—指令输入—推理规划—调用执行—记忆存储—结果输出—停用下线”的全生命周期,而且因其特有的“感知—规划—行动”逻辑,呈现出动态性。因此,安全若只在部署之后设防,无异于亡羊补牢,唯有将防线前置于设计研发(对抗测试、价值对齐、能力边界评估),贯彻于运行时(沙箱验证、多层检测拦截、关键节点强制人工审批),收束于停用下线(关停服务、撤销凭证、版本回退),才能织密安全之网。《框架3.0》所建立的覆盖模型全生命周期的安全治理体系,与新加坡《智能体人工智能治理示范框架》中“开放时控制—上线前测试—运行中监控”的逻辑相通,体现出从模型安全向系统治理的思路转变。

基于权限的风险控制

智能体的自主行动既是其优势,也是其风险所在。审慎划定行为边界,是控制智能体风险的关键。《框架3.0》将权限区分为“仅限用户本人决策”“需由用户授权决策”“智能体自主决策”,并仅为智能体授予“执行任务所需的最小权限”,辅以“分类分级监管”与“最终用途管理”,最终形成“权限分类—权限最小化—分级监管”的三层约束。回看“抱抱脸”(Hugging Face)事件,倘若“对开放互联网的访问”被归入“需用户授权决策”并受最小权限约束,沙箱的“逃逸”本可被即时阻断。

系于身份的安全治理

无问责,则无安全。但问责的基础是准确识别责任主体。而高度自主性的智能体行为主体难辨、行为轨迹难追,身份困境由此而生。为此,《框架3.0》将智能体的身份管理作为重中之重,要求为智能体配备唯一身份标识,禁止智能体应用实例间共享身份标识,鉴别用户、智能体、工具及外部服务身份,确保访问主体身份可信,从而为责任认定提供可识别、可验证、可追溯的事实锚点。

《框架3.0》以“过程”为脉络,以“身份”为支点,以“权限”为关键,为智能体确立了可感、可溯、可审的系统治理体系。毋庸讳言,作为首次直面智能体风险的制度规范,它仅是万里长征第一步。随着智能体从单智能体向多智能体跃迁,如何建立多智能体之间的连接与信任机制,如何防范对单点身份鉴别与最小权限的“协同越权”,仍是治理与技术竞速中尚待完成的任务,这亦是《人工智能安全治理框架》年年迭代的意义所在。

作者:许可 对外经济贸易大学数字经济与法律创新研究中心主任

来源:“中国网信杂志”微信公众号

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
决定寿命长短的行为,运动第三,睡觉第二,第一很多人都做不到……

决定寿命长短的行为,运动第三,睡觉第二,第一很多人都做不到……

诗词天地
2026-10-17 06:01:22
江苏某设计院即将停产结业,全员解散,网友说:好日子过去了!

江苏某设计院即将停产结业,全员解散,网友说:好日子过去了!

黯泉
2026-10-17 10:42:20
女大学生从成都奔赴上海打工,在成都月薪近5千,来上海仅收到2700元工资,瞬间破防痛哭

女大学生从成都奔赴上海打工,在成都月薪近5千,来上海仅收到2700元工资,瞬间破防痛哭

捣蛋窝
2026-10-15 17:14:38
重磅:欧盟讨论再援助乌克兰700亿!泽连斯基成特朗普替罪羊?

重磅:欧盟讨论再援助乌克兰700亿!泽连斯基成特朗普替罪羊?

项鹏飞
2026-10-17 20:11:04
北京下周气温低迷,防寒冬衣需备好

北京下周气温低迷,防寒冬衣需备好

新浪财经
2026-10-17 15:54:39
暗流已经出现?苏联当年的颠覆套路再现中国,接连怪事更值得警惕

暗流已经出现?苏联当年的颠覆套路再现中国,接连怪事更值得警惕

補懂事的孩紙
2026-10-16 11:58:16
张本智和接受日媒采访:下次再战中国队,日本胜出的可能性也很高

张本智和接受日媒采访:下次再战中国队,日本胜出的可能性也很高

失宠的小野猪
2026-10-17 17:05:50
最新民调:大多数美国人希望中期选举发生“彻底和全面的剧变”

最新民调:大多数美国人希望中期选举发生“彻底和全面的剧变”

安梦入天下
2026-10-16 13:37:11
索尼新Walkman曝光:40小时续航,售价或翻倍

索尼新Walkman曝光:40小时续航,售价或翻倍

算力游侠
2026-10-16 00:02:51
马科斯气炸了!他没料到,中国的油,不再给菲律宾 “开小灶” 了

马科斯气炸了!他没料到,中国的油,不再给菲律宾 “开小灶” 了

观史搜寻着
2026-10-16 21:53:38
回老家一趟我彻底破防:村里47个五十岁上下的壮年人,全不种地不打工,天天打牌晒太阳,一问存款还没我多

回老家一趟我彻底破防:村里47个五十岁上下的壮年人,全不种地不打工,天天打牌晒太阳,一问存款还没我多

犀利辣椒
2026-09-25 06:21:06
罕见低头!泽连斯基首次公开认栽:打了这么多年仗,我犯了无数错

罕见低头!泽连斯基首次公开认栽:打了这么多年仗,我犯了无数错

老马拉车莫少装
2026-09-24 21:22:49
急于“稳住内阁”,高市火速任命新农林水产大臣

急于“稳住内阁”,高市火速任命新农林水产大臣

参考消息
2026-10-16 15:05:55
男子和四十多岁女网友认识后,频繁发生关系,最后一次在车内,男子死亡后家属向女子索要巨额赔偿

男子和四十多岁女网友认识后,频繁发生关系,最后一次在车内,男子死亡后家属向女子索要巨额赔偿

丫头舫
2026-10-13 22:10:25
国外发现“饿两天定律”,体重从138斤降到108斤,稳稳瘦下30斤

国外发现“饿两天定律”,体重从138斤降到108斤,稳稳瘦下30斤

健身狂人
2026-10-11 00:58:32
原来这才是真相!张本智和父亲含泪公开大胆表态:入日籍是对的,否则留在国内,儿女很难出头!网友却不买账

原来这才是真相!张本智和父亲含泪公开大胆表态:入日籍是对的,否则留在国内,儿女很难出头!网友却不买账

锐评利物浦
2026-10-17 10:14:48
大连英博紧追蓉城!媒体人热议:预算2亿冲双冠,蓉城是不是慌了

大连英博紧追蓉城!媒体人热议:预算2亿冲双冠,蓉城是不是慌了

奥拜尔
2026-10-17 21:00:58
28万娶媳妇,当夜发现新娘后背有烟疤,男子崩溃,女子:便宜你了

28万娶媳妇,当夜发现新娘后背有烟疤,男子崩溃,女子:便宜你了

热心柚子姐姐
2026-10-16 17:02:46
粟裕没当上元帅的真实原因:除了毛主席,高层几乎没人主动提他

粟裕没当上元帅的真实原因:除了毛主席,高层几乎没人主动提他

鱼破笙啊
2026-10-13 20:20:25
“你是特朗普‘替罪羊’吗?” 泽连斯基静止10秒笑了

“你是特朗普‘替罪羊’吗?” 泽连斯基静止10秒笑了

看看新闻Knews
2026-10-17 11:32:04
2026-10-17 21:08:49
十二师在线 incentive-icons
十二师在线
弘扬正能量,传播十二师好声音
6808文章数 679关注度
往期回顾 全部

科技要闻

刘煜辉:99%的黄金分析师报告一钱不值

头条要闻

男子服刑七年 出狱后发现账户里数十万资金仅剩6.43元

头条要闻

男子服刑七年 出狱后发现账户里数十万资金仅剩6.43元

体育要闻

高级货,真高级

娱乐要闻

庾澄庆罕谈前妻 撕下伊能静仅剩的体面

财经要闻

新一轮大跌源头,找到了!

汽车要闻

特斯拉会飞?全新Roadster亮相

态度原创

艺术
时尚
本地
旅游
游戏

艺术要闻

投资39亿!上海大歌剧院今日启幕,螺旋平台向公众开放

降落伞裤的3组搭配,打破秋冬沉闷感!

本地新闻

因新荣记出圈,这座浙东小城才是吃货天堂

旅游要闻

贵州山上有口悬空的月亮洞,当地人说,里面葬着两千年前的夜郎王

动视称《现代战争4》登陆Switch 2会扩大受众

无障碍浏览 进入关怀版