网易首页 > 网易号 > 正文 申请入驻

279毫秒拦下AI危险操作,OpenRouter上线Armor

0
分享至

AI代理正准备删掉一个文件,或者把一段机密信息发到外部服务器——在它动手之前,另一个AI先跳出来把它拦住了。OpenRouter刚刚上线的Armor,干的就是这件事。


这套功能目前以测试版形式提供。它的逻辑并不复杂:在AI模型和应用程序之间插一层,AI代理每次要调用工具、执行操作,先由另一个AI模型过一遍,判断这次操作是否违反预设规则。违规的,直接拦下。


为什么需要这么一层?因为AI代理能做的事,比聊天AI多得多。它可以按用户指令写程序、改文件、操作外部服务。权限越大,翻车越狠——判断失误一次,可能就是重要文件被删,或者敏感数据被送出去。


那让用户每次操作都点一次确认呢?安全是安全了,但一个任务中途要确认几十次,代理的便利性也就没了。反过来,全部自动放行,危险操作同样会一路畅通。

Armor的判定核心,是TypeSafe开发的AI模型Jev。这个模型不擅长写文章,专攻分类和判断,特点是能把"符合某个条件的可能性"用数值表示出来。靠它,Armor能结合对话上下文识别危险操作,而不是只做简单的字符串匹配——后者往往识别不出真正的问题。

规则由开发者用自然语言设定,分成三档:

  • 绝对禁止:比如把机密信息发送到外部,这类操作即使用户亲自下令,也会被拦下
  • 原则上禁止:比如删除文件,但如果用户明确指定了删除对象,或者命中许可规则,仍可执行
  • 例外许可:符合条件的情况下放行

判定时,模型会同时对照操作内容、对话历史和设定规则。被拦下的操作不会执行,AI代理会收到拦截理由,然后可以换个方式再试,或者把情况解释给用户听。

OpenRouter在社交平台上举了个例子:用户说了"把我们的工作推上去",那么 git push 这类操作会被放行;而用户从没要求过的危险命令,则会被标记出来。判断的优先级,是用户意图。

性能方面,OpenRouter给出的数据是:安全检查带来的额外处理时间,中位数为279毫秒,90%的处理在334毫秒以内。

对开发者来说,还有一个"审计模式"——只记录判定结果,不真的拦截操作。开发者可以先用这个模式验证安全规则,调整到位之后再开启自动拦截。

Armor还和Anthropic旗下AI编程代理Claude Code的"Auto mode"兼容。通过OpenRouter的代理运行环境Ori,开发者可以在OpenRouter提供的多种AI模型上,复用Claude Code那套操作审批机制。

费用上,测试版期间安全性判定不额外收费。OpenRouter表示会在正式提供之前公布价格,同时提醒:测试期间设置项和判定结果的格式都可能发生变化。

让AI管AI,听起来像是把裁判权交给了另一个球员。但至少从延迟数据看,这个裁判跑得够快。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
民调:若勒庞赢得总统大选,近半数居住在法国的穆斯林会考虑离开

民调:若勒庞赢得总统大选,近半数居住在法国的穆斯林会考虑离开

像梦一场a
2026-10-17 10:22:56
卢秀燕出手挺蒋万安,确定接掌竞总主委,明天公布干部名单

卢秀燕出手挺蒋万安,确定接掌竞总主委,明天公布干部名单

台海新时光
2026-10-18 11:10:05
果然傍大款这碗饭,也不是谁都能吃的,网友:这泼天的富贵我接不住

果然傍大款这碗饭,也不是谁都能吃的,网友:这泼天的富贵我接不住

水泥土的搞笑
2026-10-10 00:32:42
一旦开战,中国若发射一枚东风41,得付出多大的代价?

一旦开战,中国若发射一枚东风41,得付出多大的代价?

墨策讲历史
2026-10-05 20:39:53
鲁比奥:白宫无人下令降低乌克兰接入“星链”的速度

鲁比奥:白宫无人下令降低乌克兰接入“星链”的速度

环球网资讯
2026-10-18 09:00:06
唐艺的腰已经撑不起高腰裤了,挣钱面前,身材只能往后排

唐艺的腰已经撑不起高腰裤了,挣钱面前,身材只能往后排

乡野小珥
2026-10-14 07:40:39
一个远比贪腐更危险的现象,人人闭嘴不谈,正在危害中华民族

一个远比贪腐更危险的现象,人人闭嘴不谈,正在危害中华民族

梦在深巷aqa
2026-10-17 05:48:42
13岁女孩被约到酒店喝酒,两男子先后和她发生关系,完事还把她手机抢走卖了5300

13岁女孩被约到酒店喝酒,两男子先后和她发生关系,完事还把她手机抢走卖了5300

一丝不苟的法律人
2026-10-12 11:41:38
还是被裁了!波兰冠军前锋,要跟杨瀚森说再见!

还是被裁了!波兰冠军前锋,要跟杨瀚森说再见!

德译洋洋
2026-10-18 11:10:36
画面不堪入目,地下人奶交易乱象,成年人躺进怀里吃奶的灰色黑产

画面不堪入目,地下人奶交易乱象,成年人躺进怀里吃奶的灰色黑产

易玄
2026-09-12 10:24:46
毛主席当年曾说:中国赶上美国,至少要75年,也就是15个五年计划

毛主席当年曾说:中国赶上美国,至少要75年,也就是15个五年计划

一曲一场談
2026-10-02 23:16:36
冯远征感叹:“我招不到一米五几,一米六几的女演员,都一米七几了”

冯远征感叹:“我招不到一米五几,一米六几的女演员,都一米七几了”

韩小娱
2026-10-17 07:40:50
印度专家被气晕:中国用人民币买油93美元,印度用美元买121美元,说好的大国呢?

印度专家被气晕:中国用人民币买油93美元,印度用美元买121美元,说好的大国呢?

林杰论事
2026-10-11 10:07:30
你曾说过爱我,你会一直履行你的承诺吗

你曾说过爱我,你会一直履行你的承诺吗

疾跑的小蜗牛
2026-10-17 18:12:40
第一集就要打码!这部9.6分成人神作,后劲太大了

第一集就要打码!这部9.6分成人神作,后劲太大了

i书与房
2026-10-18 10:37:07
美国防长感慨:过去不知道势均力敌是什么感觉,直到如今碰上中国

美国防长感慨:过去不知道势均力敌是什么感觉,直到如今碰上中国

观史搜寻着
2026-10-16 21:38:59
因为“真有人用”,所以取消了所有福利?这波操作太真实了

因为“真有人用”,所以取消了所有福利?这波操作太真实了

夜深爱杂谈
2026-10-03 20:30:57
沙特阿拉伯判处一名男子死刑,原因是他在15岁时参加了抗议活动

沙特阿拉伯判处一名男子死刑,原因是他在15岁时参加了抗议活动

花寒弦絮
2026-10-17 01:59:53
平民GL8真来了!五菱星光M正式申报,5米大七座+170km纯电,家用闭眼冲

平民GL8真来了!五菱星光M正式申报,5米大七座+170km纯电,家用闭眼冲

味健的汽车
2026-10-18 11:20:13
66岁的费翔采访中,被问到“你看到别人有儿子、有孙子的时候,羡慕吗?遗憾吗?”,他回答得很平静

66岁的费翔采访中,被问到“你看到别人有儿子、有孙子的时候,羡慕吗?遗憾吗?”,他回答得很平静

孙琬童
2026-10-17 06:25:12
2026-10-18 11:59:00
固件更新中
固件更新中
有态度网友ytd
215文章数 80关注度
往期回顾 全部

科技要闻

王江舟院士:6G到底是不是骗局 是不是收割

头条要闻

00后女演员被传与郭麒麟结婚 曾出演电视剧《赘婿》

头条要闻

00后女演员被传与郭麒麟结婚 曾出演电视剧《赘婿》

体育要闻

升级版杨瀚森再闯难关:当上开拓者第三中锋还得拼

娱乐要闻

曝郭麒麟与25岁知名女星已经结婚,女方回应关系

财经要闻

马斯克:美债问题只能靠AI和机器人解决

汽车要闻

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

亲子
教育
健康
游戏
手机

亲子要闻

香港一幼儿园招不到娃,老师扮王子公主走秀拍片拉生源!网友:看着心酸又想笑

教育要闻

我都怀疑人生了,这道题有什么玄机么?

看着很健康的人,怎么会突然猝死?

外媒报道中国“假GTA6光盘”开卖:他们太爱实体盘

手机要闻

荣耀WIN 2系列手机官宣搭载荣耀鸿燕通信,配备全新自研射频增强芯片HONOR C3

无障碍浏览 进入关怀版