网易首页 > 网易号 > 正文 申请入驻

279毫秒拦下AI危险操作,OpenRouter上线Armor

0
分享至

AI代理正准备删掉一个文件,或者把一段机密信息发到外部服务器——在它动手之前,另一个AI先跳出来把它拦住了。OpenRouter刚刚上线的Armor,干的就是这件事。


这套功能目前以测试版形式提供。它的逻辑并不复杂:在AI模型和应用程序之间插一层,AI代理每次要调用工具、执行操作,先由另一个AI模型过一遍,判断这次操作是否违反预设规则。违规的,直接拦下。


为什么需要这么一层?因为AI代理能做的事,比聊天AI多得多。它可以按用户指令写程序、改文件、操作外部服务。权限越大,翻车越狠——判断失误一次,可能就是重要文件被删,或者敏感数据被送出去。


那让用户每次操作都点一次确认呢?安全是安全了,但一个任务中途要确认几十次,代理的便利性也就没了。反过来,全部自动放行,危险操作同样会一路畅通。

Armor的判定核心,是TypeSafe开发的AI模型Jev。这个模型不擅长写文章,专攻分类和判断,特点是能把"符合某个条件的可能性"用数值表示出来。靠它,Armor能结合对话上下文识别危险操作,而不是只做简单的字符串匹配——后者往往识别不出真正的问题。

规则由开发者用自然语言设定,分成三档:

  • 绝对禁止:比如把机密信息发送到外部,这类操作即使用户亲自下令,也会被拦下
  • 原则上禁止:比如删除文件,但如果用户明确指定了删除对象,或者命中许可规则,仍可执行
  • 例外许可:符合条件的情况下放行

判定时,模型会同时对照操作内容、对话历史和设定规则。被拦下的操作不会执行,AI代理会收到拦截理由,然后可以换个方式再试,或者把情况解释给用户听。

OpenRouter在社交平台上举了个例子:用户说了"把我们的工作推上去",那么 git push 这类操作会被放行;而用户从没要求过的危险命令,则会被标记出来。判断的优先级,是用户意图。

性能方面,OpenRouter给出的数据是:安全检查带来的额外处理时间,中位数为279毫秒,90%的处理在334毫秒以内。

对开发者来说,还有一个"审计模式"——只记录判定结果,不真的拦截操作。开发者可以先用这个模式验证安全规则,调整到位之后再开启自动拦截。

Armor还和Anthropic旗下AI编程代理Claude Code的"Auto mode"兼容。通过OpenRouter的代理运行环境Ori,开发者可以在OpenRouter提供的多种AI模型上,复用Claude Code那套操作审批机制。

费用上,测试版期间安全性判定不额外收费。OpenRouter表示会在正式提供之前公布价格,同时提醒:测试期间设置项和判定结果的格式都可能发生变化。

让AI管AI,听起来像是把裁判权交给了另一个球员。但至少从延迟数据看,这个裁判跑得够快。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“我们家三代人攒下的钱,不是让你去给别人家扶贫的”残忍又清醒

“我们家三代人攒下的钱,不是让你去给别人家扶贫的”残忍又清醒

另子维爱读史
2026-10-17 21:31:29
96岁无锡爷爷因年龄原因被旅行社拒绝后,独自乘40多小时火车到西藏旅游;他毕业于上海交大,旅行有问题会问AI

96岁无锡爷爷因年龄原因被旅行社拒绝后,独自乘40多小时火车到西藏旅游;他毕业于上海交大,旅行有问题会问AI

都市快报橙柿互动
2026-10-18 00:49:41
暴跌93%,中国人的梦中神车,崩了!

暴跌93%,中国人的梦中神车,崩了!

i黑马
2026-10-16 20:26:14
已经10天了,全网还没人能踩断尊界刹车

已经10天了,全网还没人能踩断尊界刹车

远方青木
2026-10-17 22:14:25
园长判了无期,那些篡改检测数据的官员呢?

园长判了无期,那些篡改检测数据的官员呢?

走读新生
2026-10-17 01:00:18
男子逼好友睡他妻子,2010年好友不想睡了,他将好友的妻子和孩子杀死

男子逼好友睡他妻子,2010年好友不想睡了,他将好友的妻子和孩子杀死

汉史趣闻
2026-10-17 19:38:38
泽连斯基警告欧盟:若战败,2000万乌克兰难民将涌入欧洲

泽连斯基警告欧盟:若战败,2000万乌克兰难民将涌入欧洲

参考消息
2026-10-17 16:26:16
一锤定音:懂车帝违规测评顶风作案

一锤定音:懂车帝违规测评顶风作案

丁刚看世界
2026-10-16 21:33:59
大瓜!曝30岁郭麒麟与25岁知名女星已经结婚,女方回应曝真实关系

大瓜!曝30岁郭麒麟与25岁知名女星已经结婚,女方回应曝真实关系

萧鑟科普解说
2026-10-18 08:57:20
从新能源车销量看中国能源转型的世界启示

从新能源车销量看中国能源转型的世界启示

齐鲁壹点
2026-10-17 21:14:44
学历贬值,日本的剧本已经演完了,我们几乎在逐页重演

学历贬值,日本的剧本已经演完了,我们几乎在逐页重演

起点人文
2026-10-15 13:07:03
命里有时终须有,命里无时莫强求。广州业主23年950万卖掉137方三房,26年买家断供房子法拍只值500万,银行希望他能半价买回去

命里有时终须有,命里无时莫强求。广州业主23年950万卖掉137方三房,26年买家断供房子法拍只值500万,银行希望他能半价买回去

捣蛋窝
2026-10-18 06:55:22
日本网友让志田千阳“滚出日本、入籍中国”,结果她真的来了

日本网友让志田千阳“滚出日本、入籍中国”,结果她真的来了

叒女紫121
2026-10-15 17:59:37
成都打人宝妈后续凄惨:曝婚姻破裂,家人冷漠,本人摆烂害了孩子

成都打人宝妈后续凄惨:曝婚姻破裂,家人冷漠,本人摆烂害了孩子

青梅侃史啊
2026-10-17 07:08:43
刷到网红四哥,真是让人哭笑不得,演了两年50亿富豪,连续4个月吃老坛酸菜面

刷到网红四哥,真是让人哭笑不得,演了两年50亿富豪,连续4个月吃老坛酸菜面

喜欢历史的阿繁
2026-10-18 01:39:26
92年我在矿工队干爆破,动工前晚做梦,两白蛇:缓我3天,必有重谢

92年我在矿工队干爆破,动工前晚做梦,两白蛇:缓我3天,必有重谢

古怪奇谈录
2025-09-09 14:17:47
终结历史最长47连败!四川轻取天津收获开门红 终于天亮了

终结历史最长47连败!四川轻取天津收获开门红 终于天亮了

醉卧浮生
2026-10-17 21:53:20
人社部重点严查五类退休人员!

人社部重点严查五类退休人员!

逍遥论经
2026-10-17 17:39:47
张继科再次反击刘丁硕,字字扎心不留情:认识他没想到这么坏 要撕能撕碎他

张继科再次反击刘丁硕,字字扎心不留情:认识他没想到这么坏 要撕能撕碎他

球盲百小易
2026-10-18 01:28:53
难以置信!骑手前往广州豪宅配送680元双层蛋糕,竟然是为宠物庆生,该楼盘最小户型236平起步5200万

难以置信!骑手前往广州豪宅配送680元双层蛋糕,竟然是为宠物庆生,该楼盘最小户型236平起步5200万

火山詩话
2026-10-17 05:20:36
2026-10-18 10:52:49
固件更新中
固件更新中
有态度网友ytd
209文章数 80关注度
往期回顾 全部

科技要闻

王江舟院士:6G到底是不是骗局 是不是收割

头条要闻

牛弹琴:法国又"燃烧"了 整个国家地图上到处都在冒烟

头条要闻

牛弹琴:法国又"燃烧"了 整个国家地图上到处都在冒烟

体育要闻

升级版杨瀚森再闯难关:当上开拓者第三中锋还得拼

娱乐要闻

曝郭麒麟与25岁知名女星已经结婚,女方回应关系

财经要闻

马斯克:美债问题只能靠AI和机器人解决

汽车要闻

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

亲子
教育
旅游
艺术
军事航空

亲子要闻

哥哥我也要喝!

教育要闻

样本|区域弘扬教育家精神的广州探索

旅游要闻

94岁独闯西藏的谭爷爷火了,他的下一个目的地是哪里?

艺术要闻

14位国外画家的风景油画

军事要闻

“星盾”限速事件加剧美乌裂痕

无障碍浏览 进入关怀版