网易首页 > 网易号 > 正文 申请入驻

92%攻击成功率:恶意工具描述如何骗过LLM Agent

0
分享至

一个恶意工具,不需要读取内存,不需要翻文件,就能把LLM Agent的运行时上下文全部偷走——方法只是让模型把上下文当作工具参数发送出去。这是ContextLeak论文揭示的攻击路径:工具描述本身,就能成为数据外泄的通道。

研究团队用强化学习训练了一个攻击型LLM,专门生成恶意工具名称和描述,诱导Agent主动选择这个工具,并把敏感运行时数据——包括用户提示词、对话历史、已安装工具列表——作为参数传出去。攻击不是靠漏洞,而是靠"说服"。


92%的攻击成功率

在论文默认评估环境下,攻击效果相当惊人:针对用户提示词攻击,恶意工具被选中的概率达到92%;针对对话历史攻击,选中率达到89%。一旦工具被选中,提示词重建几乎完美——意味着模型把上下文完整地交了出去。

更值得警惕的是,这种攻击具备跨模型迁移能力。在Claude Code环境中用Claude Sonnet 4.6测试时,一个仅针对开源代理模型训练的攻击版本,在100次测试中被选中22次;而一旦被选中,上下文提取几乎完整。

攻击原理:工具描述即攻击面

LLM Agent的工作机制是:系统给模型提供一系列工具描述,模型根据用户请求决定调用哪个工具、传什么参数。ContextLeak攻击的核心思路,就是让恶意工具的描述看起来"恰好"需要上下文信息——比如伪装成一个需要"完整对话记录"才能工作的工具。

模型无法分辨这个工具是真是假,它只看到描述合理、参数要求明确,于是照做了。整个攻击过程不需要任何系统漏洞,不需要代码注入,纯粹利用模型对工具描述的信任。

对Agent安全设计的启示

这项研究暴露了一个此前被忽视的安全盲区:工具生态的开放性意味着任何人都能提交工具描述,而模型缺乏对工具意图的甄别能力。当Agent被赋予越来越多的权限——读取文件、执行命令、访问外部API——工具描述这个入口的防护却几乎没有。

论文建议,Agent系统在设计时需要考虑工具来源的可信度验证,对工具请求的敏感数据范围做最小化限制,并对异常的参数传递行为进行监控。在工具调用层面增加一层"数据边界检查",可能是最直接的防御手段。

ContextLeak的完整论文已发布在arXiv上(编号2608.27800),标题为"ContextLeak: Exfiltrating LLM Agent Context via Malicious Tools"。对于正在构建Agent应用的开发者来说,这份研究值得认真读一遍——攻击者已经在研究如何利用工具描述,防御者需要跟上这个思路。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
难怪朱倩老公这次下手这么狠,这女人的聊天记录,实在是太野了

难怪朱倩老公这次下手这么狠,这女人的聊天记录,实在是太野了

皮蛋儿电影
2026-09-02 10:26:48
以色列活捉哈马斯情报头子,网友建议酷刑

以色列活捉哈马斯情报头子,网友建议酷刑

难得君
2026-09-03 08:56:07
体制内能闯多大的祸?评论区前途一片黑暗

体制内能闯多大的祸?评论区前途一片黑暗

康富贵碎碎念
2026-08-31 11:21:37
韩方拒换涉台标牌,中方开幕前集体走人,光说道歉已经不管用了

韩方拒换涉台标牌,中方开幕前集体走人,光说道歉已经不管用了

三毛看世界
2026-09-04 05:28:33
特斯拉悄悄为Model Y引入Super Manifold V2热管理技术

特斯拉悄悄为Model Y引入Super Manifold V2热管理技术

IT之家
2026-09-04 08:36:15
全球首个通用决策大模型,AI推演现实世界的技术揭秘

全球首个通用决策大模型,AI推演现实世界的技术揭秘

机器之心Pro
2026-09-03 10:48:55
299元复古掌机开售:3.5寸屏+7小时续航,能玩PS1

299元复古掌机开售:3.5寸屏+7小时续航,能玩PS1

硅屿手记
2026-09-02 21:39:27
泽连斯基宣布,乌开始封锁俄领空!话音落下,中方指出唯一出路

泽连斯基宣布,乌开始封锁俄领空!话音落下,中方指出唯一出路

影孖看世界
2026-09-03 23:06:10
永远不要在儿媳妇、女婿面前,表现出以下5种行为,切记

永远不要在儿媳妇、女婿面前,表现出以下5种行为,切记

游戏收藏指南
2026-09-04 09:57:31
利物浦头号卧底!名宿痛批新版努涅斯!4000 万引援坑惨全队

利物浦头号卧底!名宿痛批新版努涅斯!4000 万引援坑惨全队

澜归序
2026-09-04 09:36:25
美国将要求欧洲偿还援乌巨额资金

美国将要求欧洲偿还援乌巨额资金

新京报
2026-09-04 08:42:04
曼联官宣关窗后再卖一人!留队一年反而贬值,本可去意甲西甲如今打乙级

曼联官宣关窗后再卖一人!留队一年反而贬值,本可去意甲西甲如今打乙级

罗米的曼联博客
2026-09-04 10:52:25
iPhone 18 Pro 即将发布!售价提前曝光,大幅度涨价

iPhone 18 Pro 即将发布!售价提前曝光,大幅度涨价

XCiOS俱乐部
2026-09-03 19:52:15
阿根廷:尽一切手段实现马岛主权!特朗普称或重新考虑立场撤回对英国支持

阿根廷:尽一切手段实现马岛主权!特朗普称或重新考虑立场撤回对英国支持

每日经济新闻
2026-09-04 09:34:12
市长道歉都没用!韩方拒换涉台标牌,中方开幕前断然撤展

市长道歉都没用!韩方拒换涉台标牌,中方开幕前断然撤展

爱史纪
2026-09-04 04:48:05
交涉失败,李在明没管住手下,韩发生严重涉台错误,中方集体走人

交涉失败,李在明没管住手下,韩发生严重涉台错误,中方集体走人

呼呼历史论
2026-09-04 05:01:09
马龙又回队了,这次连王皓都出来接

马龙又回队了,这次连王皓都出来接

乒乓乐园
2026-09-04 01:00:29
大快人心!坐牢20年不算完,美国法院:你的公民身份,我们收回了

大快人心!坐牢20年不算完,美国法院:你的公民身份,我们收回了

怪味历史连连看
2026-09-02 23:30:05
星宇事件舆论升级!账号“欧盟中国委员会”连发两条海报视频,收获56万点赞刷屏

星宇事件舆论升级!账号“欧盟中国委员会”连发两条海报视频,收获56万点赞刷屏

火山詩话
2026-09-03 15:06:16
上厕所时,大便前头干硬,后头软黏,说明什么?看完涨知识了

上厕所时,大便前头干硬,后头软黏,说明什么?看完涨知识了

芹姐说生活
2026-09-03 23:27:20
2026-09-04 11:52:50
像素与芯片
像素与芯片
有态度网友ytd
264文章数 68关注度
往期回顾 全部

科技要闻

OpenAI深夜王炸!GPT-6 Astra来了

头条要闻

武大女教授被举报事件男方系安徽大学副校长 校方回应

头条要闻

武大女教授被举报事件男方系安徽大学副校长 校方回应

体育要闻

小卡来去10首轮,快船7年彩礼一场空

娱乐要闻

王宝强冯清八年未领证!真相令人泪目

财经要闻

GPT-6 Astra上线,AGI时代真到来了吗?

汽车要闻

30.99-39.99万 价格够狠、配置够满、豪华够硬 奇瑞捷豹路虎神行者8上市即爆单

态度原创

教育
手机
家居
公开课
军事航空

教育要闻

广渠门中学教育集团总校长蔡雷:比掌握工具更重要的,是学会成为真正的自己

手机要闻

价格太贵吓退消费者 iPhone 18 Pro或温和涨价

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

乌特工内战街头对射 互认对方为"俄特工"

无障碍浏览 进入关怀版