网易首页 > 网易号 > 正文 申请入驻

无身份不信任:自治时代的AI治理

0
分享至

摘要:身份治理成为AI安全新边界,智能体访问失控引发数据泄露危机。



2024年初,一家金融服务公司发现其AI客服代理在用户使用特定提示词技术时,访问并可能泄露了敏感账户信息。此次泄露数周未被察觉,因为无人明确界定该代理应该访问或不应该访问哪些数据。该事件揭示了一个关键现实:随着AI嵌入企业架构,问题不在于是否应保护AI,而在于如何在风险升级前确保其安全。

身份即AI的新边界。

正如身份成为数字化转型的控制平面,它现在正成为AI系统的安全锚点。身份不再仅验证人类;它管理着机器、模型和智能体如何访问数据、做出决策并与世界交互。

从用户到智能体:扩大的身份危机

传统身份管理专注于人:员工、合作伙伴和客户。但现在身份的范畴已急剧扩展至包括:

  • 代表用户自主行事的智能体AI——在没有直接人工监督的情况下做出决策、处理交易和访问敏感系统
  • AI驱动的业务流程自动化——基于智能分析自动批准交易、流转文档或触发工作流而无需人工验证的系统
  • 嵌入企业平台的Copilot和AI助手——以继承的用户权限访问公司数据、生成内容并在多个系统中执行操作
  • 与物理基础设施交互的数字孪生——连接虚拟和物理安全边界

每个实体都需要经过验证的身份、认证、授权和治理。如果没有适当的控制措施,每个实体都可能成为潜在的攻击载体,并在相互连接的系统中蔓延。

这一转变既是技术性的,也是哲学性的。AI系统不再仅仅是后端组件,它们是决策者、行为者和自主参与者,必须在安全架构中被视为首要身份。

治理AI访问:价值488万美元的问题

AI的安全性仅取决于其能触及的数据。现代AI集成涉及机密文档、客户个人身份信息(PII)、财务记录、源代码和专有算法。没有强大的身份治理,错误的用户或错误的AI实例在错误的时间访问错误的数据将变得异常容易。

身份治理和智能体AI生命周期管理必须成为AI的核心安全推动力。正如我们对员工执行访问策略一样,我们也需要为AI智能体及其使用模式定义权限、审批工作流和审计追踪。

每个组织都应回答的关键问题:谁批准了此智能体的部署?它可以访问哪些具体数据及原因?其访问权限上次审核是何时?我们如何将决策追溯到授权身份?

通过身份控制缓解AI滥用和数据泄露

AI系统,尤其是大语言模型(LLM),面临独特的攻击途径:提示词注入、越狱和恶意输入,这些都可能操纵输出结果或暴露敏感信息。它们还可能生成虚假信息,从而造成声誉、法律或运营方面的损害。

身份控制需提供多层保护:

  • 模型溯源——确保模型或智能体源自可信来源
  • 模型级问责——分配明确所有权,以便有问题的AI响应可追溯至特定身份和配置
  • 集成级认证——监控哪些应用和服务调用AI模型,确保其在定义的安全边界内运行
  • 用户级控制——确定谁可以在何种情况下提示AI系统,防止未经授权的操纵企图

通过将每次AI交互与已验证身份绑定,从而获得对意图、范围和结果的可见性,将AI从黑盒转变为可审计系统。

为智能体AI做准备:身份作为协调层

随着智能体AI的兴起,多个智能体自主协调任务,在没有直接人工监督的情况下,跨互联的企业系统进行协商、委托和行动,使得身份变得更加关键。

早期实践表明,AI智能体能够管理供应商关系、处理金融交易并与其他自动化系统协调。没有适当的身份框架,这将成为无法治理的安全风险。

在智能体世界中,身份成为协调层,管理智能体间的信任关系,确保与企业策略一致,提供自主交互的全面审计追踪,并在智能体行为异常时实现快速事件响应。

没有身份,智能体AI将陷入混乱。拥有身份,它就会成为有组织的智能。

不作为的代价

延迟实施AI身份治理,企业将面临日益增长的风险。据IBM数据泄露报告显示,数据泄露成本平均达488万美元,且53%的组织受到AI相关事件影响,财务风险巨大且不断增长。而2025年开始实施的欧盟《人工智能法案》的罚款更是高达3500万欧元或全球营业额的7%。

不受监管的人工智能可能会在相互关联的系统中引发连锁故障,使安全事件的范围超出传统数据泄露的范畴。拥有成熟AI治理的企业可以更快速、更自信地部署AI,而缺乏适当控制的企业则面临部署延迟和风险管理开销。

为AI时代重新构想IAM

这一演变需要从将身份视为人力资源职能转变为将其视为适用于人员、机器、代理和自主系统的通用安全框架。

面向AI的IAM必备能力包括:针对AI智能体和LLM的细粒度访问控制与动态策略执行、对AI生成操作的持续认证和风险评估、人类可理解的授权机制、以及涵盖自动上线、监控和退役的AI身份生命周期治理。

安全领导者必须在每项AI计划启动之初就倡导以身份为中心的设计,而非事后补救。

身份是AI信任的基石

随着AI能力和自主性的增长,我们的治理能力必须相应发展。随着67%的企业已部署安全AI和自动化技术,身份管理不再是后台职能,它已成为AI信任的前线。

身份有助于我们控制访问权限、追踪行为、规范行为并确保责任落实。它将责任与自动化相连接,并让我们有信心不仅更快地部署人工智能,而且更智能、更安全地部署。

因为在AI时代,问题不仅仅是"我们能构建它吗?"更是"我们能信任它吗?"而信任,一如既往,始于身份。

主动进行AI治理的时间窗口正在关闭,需要在12到18个月的时间建立强健的身份框架,否则未受治理的AI将成为竞争劣势和监管风险。

声明:包含AI生成内容

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
一个贪财一个好色!三婚娶小37岁徒弟,81生女84生儿,现活成这样

一个贪财一个好色!三婚娶小37岁徒弟,81生女84生儿,现活成这样

兵卒史
2026-10-13 00:43:48
内塔尼亚胡:已下令以军立即对希伯伦实施围困,今起对约旦河西岸实施全面封锁

内塔尼亚胡:已下令以军立即对希伯伦实施围困,今起对约旦河西岸实施全面封锁

政知新媒体
2026-10-23 16:47:11
商务部新闻发言人就美国防部公布所谓科研安全审查结果事答记者问

商务部新闻发言人就美国防部公布所谓科研安全审查结果事答记者问

新京报
2026-10-23 14:48:07
出轨女子第二波聊天记录曝光,虎狼之词惊呆吃瓜网友,她嫌丢人开始批量投诉了

出轨女子第二波聊天记录曝光,虎狼之词惊呆吃瓜网友,她嫌丢人开始批量投诉了

汉史趣闻
2026-09-01 17:55:01
藏了21年的雷彻底炸了,中国官方发全球征缴令,潘石屹躲得掉吗?

藏了21年的雷彻底炸了,中国官方发全球征缴令,潘石屹躲得掉吗?

明天见灌装冰块
2026-08-13 20:00:24
人至七旬终明白:越“贪色”的老人,越长寿、越快乐

人至七旬终明白:越“贪色”的老人,越长寿、越快乐

风起见你
2026-10-10 00:37:12
每体:巴萨皇马国家德比,胜者将独享交锋胜场纪录

每体:巴萨皇马国家德比,胜者将独享交锋胜场纪录

懂球帝
2026-10-23 18:38:17
于东来:已拿出2000万元投资爱情研究小组,让大家明白什么是爱然后会爱,孩子教育研究小组也投2千万

于东来:已拿出2000万元投资爱情研究小组,让大家明白什么是爱然后会爱,孩子教育研究小组也投2千万

界面新闻
2026-10-21 16:27:22
徐佳宁5亿求婚只是麻将术语

徐佳宁5亿求婚只是麻将术语

东方不败然多多
2026-10-23 15:10:05
007新邦德锁定4位候选人,最终试镜本周开跑

007新邦德锁定4位候选人,最终试镜本周开跑

时光慢旅人
2026-10-23 00:28:08
都说你2亿太贵,如今场均30分5板2断,打成白菜价,MVP也给你让路

都说你2亿太贵,如今场均30分5板2断,打成白菜价,MVP也给你让路

大西体育
2026-10-23 10:59:23
花旗证券正式进入中国市场:那能带散户去买美股吗?

花旗证券正式进入中国市场:那能带散户去买美股吗?

城事堂
2026-10-24 00:10:04
从陕北放羊娃到“中国波霸”,她靠身材被记住十年,也被困了十年

从陕北放羊娃到“中国波霸”,她靠身材被记住十年,也被困了十年

观史搜寻着
2026-10-03 04:45:11
一个中产家庭的自述:我把全家底丢给豆包工作做体检,发现抗风险能力几乎为零

一个中产家庭的自述:我把全家底丢给豆包工作做体检,发现抗风险能力几乎为零

锐眼财经
2026-10-14 12:29:57
华为Pro Max新机亮相:搭载8800mAh+8000nit+北斗卫星!

华为Pro Max新机亮相:搭载8800mAh+8000nit+北斗卫星!

科技堡垒
2026-10-22 09:43:46
乒乓亚锦赛:10月24日赛程公布!国乒2战张本智和,冲击单双打4强

乒乓亚锦赛:10月24日赛程公布!国乒2战张本智和,冲击单双打4强

全言作品
2026-10-24 03:40:07
会昌战役陈赓装死,黄埔同学摸颈脉后竟说:此人已死

会昌战役陈赓装死,黄埔同学摸颈脉后竟说:此人已死

纪史行者
2026-10-23 02:40:03
特朗普:要继续打可以,钱自己出,武器我卖,别指望我冲前面!

特朗普:要继续打可以,钱自己出,武器我卖,别指望我冲前面!

阿器谈史
2026-10-22 21:25:25
9月悄悄来的3天,这几个属相的朋友,要抓住属于自己的好机会咯

9月悄悄来的3天,这几个属相的朋友,要抓住属于自己的好机会咯

温暖心语
2026-09-10 19:20:07
恋爱3年,金小妹急着嫁甜茶,男方却坦言还没准备好?

恋爱3年,金小妹急着嫁甜茶,男方却坦言还没准备好?

吃青菜长高
2026-10-23 23:15:15
2026-10-24 10:27:00
安全419 incentive-icons
安全419
中国网络安全产业资讯媒体
1379文章数 206关注度
往期回顾 全部

科技要闻

写程序、做3D,新Kimi还有多少本事?

头条要闻

牛弹琴:难得的一个好消息 梅拉尼娅促成俄乌局部停火

头条要闻

牛弹琴:难得的一个好消息 梅拉尼娅促成俄乌局部停火

体育要闻

没人看好的加图索,打出队史最佳开局

娱乐要闻

黎纪君晒与刘恺威合照 恋情后首次同框

财经要闻

叫"保障"不叫"保险":租车平台的文字游戏

汽车要闻

设计换新/智舱升级 2027款博越限时价7.89万起

态度原创

健康
教育
时尚
公开课
军事航空

痘痘能根治吗?皮肤科医生说实话

教育要闻

哪个温度最低?最后一个答案是什么鬼

今年秋冬最流行的4件外套,配“连帽卫衣”太时髦了!

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

泽连斯基:星链及星盾速度限制仍未解除

无障碍浏览 进入关怀版