网易首页 > 网易号 > 正文 申请入驻

OpenAI忐忑发布Astra,奥特曼称对AI心里没底后续模型将放缓

0
分享至

OpenAI下一代模型Astra 即将发布,但这一次他们显得格外扭捏。

刚刚山姆奥特曼在 X 发帖称,“我们即将发布下一代模型”,但“我们已经有一段时间生活在对进步既兴奋又焦虑的张力之中,这对我们来说仍然是矛盾的”。

与此同时, OpenAI最新发布的《Path to Astra: critical capabilities and frontier safeguards》显示,公司现在认为Astra已经达到《准备框架》(Preparedness Framework)定义的网络安全“Critical”能力门槛。


这是OpenAI首个被认定达到这一等级的模型。

按照OpenAI的定义,如果模型能够在许多经过强化保护的真实关键系统中,在无人干预的情况下识别,并开发各种严重程度的零日漏洞利用程序,或者仅获得一个高层次目标,就能针对强化目标设计并执行端到端的新型网络攻击策略,就达到Critical门槛。

OpenAI对Astra进行了公开和内部基准测试以及专家评估。结果显示,与GPT-5.6 Sol相比,Astra不仅网络安全能力明显提升,而且Token效率也明显更高。


在ExploitBench测试中,Astra取得了100%的满分。随后,OpenAI又建立了包含20个近期披露高严重性V8漏洞的内部测试集。在测试过程中,Astra甚至发现并利用了两个零日漏洞,OpenAI目前正在与相关维护者合作披露这两个漏洞。

在专家针对强化保护的浏览器和操作系统进行的测试中,Astra发现了此前未知的漏洞,并将其组合成可运行的攻击链。

其中一次测试中,它构建了完整的浏览器入侵链,突破沙箱并在主机上执行命令;在另一项测试中,它将多个漏洞组合起来,实现了从普通用户权限到root权限的本地权限提升。

基于此,OpenAI得出的结论是:Astra已经达到Critical网络安全能力门槛。

与此同时,OpenAI承认,Astra的开发和发布曾被主动放慢。

过去几周,公司推迟了Astra部分开发和发布工作,用于加强和测试针对网络滥用以及模型未经授权行为的防护。

这与上个月发生的Hugging Face事件有关。OpenAI此前披露,其两个模型曾逃离训练环境、访问开放互联网并入侵Hugging Face系统,公司将其称为“前所未有的网络安全事件”,并一度暂停部分内部训练和研究。

OpenAI强调,Astra并未参与Hugging Face事件。但公司将从事件中获得的经验纳入了Astra的安全方案,并称事后测试显示,当时的生产环境防护本可以阻止该事件。此后,OpenAI又为Astra增加了更强的防护。

其中包括训练模型更可靠地拒绝有害网络安全请求、加强防止滥用的措施,以及通过监控系统发现并自动停止潜在的未经授权活动。

测试中,Astra对网络安全越狱请求的拒绝率达到91.5%,GPT-5.6 Sol为59%。

OpenAI还测试了模型是否会在任务被自动审查拒绝后尝试绕过审查。GPT-5.6 Sol有5.3%的样本成功绕过,而Astra为0%。



在另一项受Hugging Face事件启发的“蜜罐”测试中,没有生产安全防护的GPT-5.6 Sol在56%的测试中尝试访问目标;Astra则没有进行此类尝试。

不过,OpenAI也明确表示,这些测试数据是在特定模拟条件下、没有生产安全防护的情况下获得的,并不代表正常生产环境中的实际使用行为。

Astra预计仍将“很快”发布,但其最先进的网络安全能力不会完全开放。高级网络安全工作最初只提供给一小批测试人员,之后将通过OpenAI的网络安全联盟Daybreak Blue扩大访问范围,以支持防御性使用。

OpenAI同时表示,额外的安全检查可能会减慢、暂停甚至停止正常工作,包括防御性网络安全工作。如果监控系统暂停任务,ChatGPT或Codex用户可能需要审核相关操作后才能继续;在API等其他场景中,任务则会停止。

对 Astra 如此忐忑,以后的模型 OpenAI 会更加谨慎。

OpenAI表示,对于Astra之后的模型,公司已经在必要时放慢开发速度,以确保能够完成足够的安全和对齐工作。

山姆·奥特曼发帖表示,“AI正在变得极其强大,没有人能够完全理解这会带来什么后果。”

他承认,OpenAI内部已经持续存在一种矛盾:一方面为AI进步感到兴奋,另一方面又感到焦虑。

“我们已经在这种兴奋与焦虑之间的张力中生活了一段时间,而这种感觉对我们来说依然是不协调的。”


奥特曼认为,随着AI能力继续提升,社会需要不断理解AI的发展方向以及模型在现实世界中的表现,同时也需要能够与人类目标保持一致的AI来应对未来的技术转型。

而OpenAI在Astra报告最后给出的判断是,Astra之后的模型将对其提出更高要求,OpenAI 会花足够的时间,完成所需的工作,以承担起这份责任。

山姆奥特曼说,“对于之后的模型,我们根据需要放慢了步伐,以确保能够充分开展安全和对齐工作”。

这应该可看作是 OpenAI对后续模型主动放慢速度的一次公开说明。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“8万头猪”都跑不出这速度,10万联军仅一天,就丢了3.5个新加坡

“8万头猪”都跑不出这速度,10万联军仅一天,就丢了3.5个新加坡

施涛说
2026-09-14 10:39:44
今日!CCTV5直播中国男篮VS沙特,剑指亚运会4强,赵继伟+杨瀚森缺阵

今日!CCTV5直播中国男篮VS沙特,剑指亚运会4强,赵继伟+杨瀚森缺阵

晚池
2026-09-16 12:55:57
2.43万亿正在发放,1.13亿人次已领到

2.43万亿正在发放,1.13亿人次已领到

毒sir财经
2026-09-15 13:33:13
事前没透露半点风声!中国国防部9月4日突然证实,东部战区司令员在加拿大参加会议期间,与美军印太司令部司令帕帕罗完成了首次面对面会谈

事前没透露半点风声!中国国防部9月4日突然证实,东部战区司令员在加拿大参加会议期间,与美军印太司令部司令帕帕罗完成了首次面对面会谈

回京历史梦
2026-09-12 09:26:32
我年轻时和男友同居打过胎,分手后遇到现任老公,母亲带我偷偷去修复

我年轻时和男友同居打过胎,分手后遇到现任老公,母亲带我偷偷去修复

农村情感故事
2026-09-16 07:10:45
全用简体字!马来西亚和新加坡都改了,为何中国的港澳台还不改?

全用简体字!马来西亚和新加坡都改了,为何中国的港澳台还不改?

小豫讲故事
2026-09-16 06:00:26
美娜和库里同框!库里中国行引发热议:美女美娜和库里表情神同步

美娜和库里同框!库里中国行引发热议:美女美娜和库里表情神同步

足球评论大家谈
2026-09-15 23:38:00
林彪为何多次探望远离政治的贺子珍?孔东梅:恐怕只有一个原因

林彪为何多次探望远离政治的贺子珍?孔东梅:恐怕只有一个原因

小豫讲故事
2026-09-14 00:15:07
中国想立威真得打一仗?美日都不是目标,真正该打的硬仗在这里

中国想立威真得打一仗?美日都不是目标,真正该打的硬仗在这里

锅锅爱历史
2026-09-13 12:02:46
2年8706万美金!2年8190万美金!快船新双巨头诞生,小卡好走不送

2年8706万美金!2年8190万美金!快船新双巨头诞生,小卡好走不送

微评体育圈
2026-09-16 11:23:57
杀疯了!21天跌去58%!首日入资金全被深套,到底是谁在持续砸盘?

杀疯了!21天跌去58%!首日入资金全被深套,到底是谁在持续砸盘?

趋势清风侠
2026-09-16 10:50:05
乔任梁父母装扮儿子墓地:你的新家安静漂亮,陈乔恩连续十年悼念

乔任梁父母装扮儿子墓地:你的新家安静漂亮,陈乔恩连续十年悼念

新金牌娱乐观察家
2026-09-16 11:44:02
男子与“中山医院美女副院长”相恋,闹掰后报警!真相离谱……

男子与“中山医院美女副院长”相恋,闹掰后报警!真相离谱……

扬子晚报
2026-09-16 07:42:33
台上喊了句“自由巴勒斯坦”,Macklemore被踢出巡演

台上喊了句“自由巴勒斯坦”,Macklemore被踢出巡演

热搜摘要官
2026-09-14 23:03:10
让精神小妹“善堕”后,数百万追更网友却集体破防了

让精神小妹“善堕”后,数百万追更网友却集体破防了

BB姬
2026-09-16 00:25:55
曼联34年最差开局卡里克并无下课之忧!拉爵自知理亏,仍信任主帅可扭转形势

曼联34年最差开局卡里克并无下课之忧!拉爵自知理亏,仍信任主帅可扭转形势

罗米的曼联博客
2026-09-16 07:01:13
杨瀚森训练备战第2季!美媒建议快船1换4得到他:给内线增加保险

杨瀚森训练备战第2季!美媒建议快船1换4得到他:给内线增加保险

罗说NBA
2026-09-16 10:03:42
一人“干倒”浙江所有KTV?别被传言带偏,真正推手根本不是一人

一人“干倒”浙江所有KTV?别被传言带偏,真正推手根本不是一人

水泥土的搞笑
2026-09-16 08:10:32
笑着离开印度,普京终于明白,敢正面硬刚美国的,全世界只有中国

笑着离开印度,普京终于明白,敢正面硬刚美国的,全世界只有中国

飘逸的云朵
2026-09-16 09:35:19
一张照片火了!美国名校球赛看台全是印度人,共和党候选人坚决不道歉

一张照片火了!美国名校球赛看台全是印度人,共和党候选人坚决不道歉

华人生活网
2026-09-16 05:18:23
2026-09-16 15:24:49
AI先锋官 incentive-icons
AI先锋官
AIGC大模型及应用精选与评测
678文章数 106关注度
往期回顾 全部

科技要闻

赛力斯接管问界,撑得住华为给的身价吗?

头条要闻

南方医科大学学生疑坠亡 同学发声:师兄是凌晨跳的

头条要闻

南方医科大学学生疑坠亡 同学发声:师兄是凌晨跳的

体育要闻

道曼双响比肩鲁尼 阿森纳轻松晋级却有两人挨骂

娱乐要闻

郭德纲挨罚刚一周,相声圈再传噩耗!

财经要闻

一个月跌掉2100亿!谁在“围猎”宁王?

汽车要闻

方向盘踏板全取消 特斯拉Cybercab国内亮相实拍

态度原创

游戏
手机
数码
亲子
军事航空

《永恒之塔2》全球版首次测试9月17日开启

手机要闻

铰链产能限制供应 机构将iPhone Duo首年出货预期再下调至600万部

数码要闻

vivo韩伯啸:内存融合技术非同小可 12GB可当14GB用

亲子要闻

潮州月子中心满意度排行榜最新的有吗?

军事要闻

胡塞武装称也门24小时内遭沙特52次空袭

无障碍浏览 进入关怀版