网易首页 > 网易号 > 正文 申请入驻

OpenAI忐忑发布Astra,奥特曼称对AI心里没底后续模型将放缓

0
分享至

OpenAI下一代模型Astra 即将发布,但这一次他们显得格外扭捏。

刚刚山姆奥特曼在 X 发帖称,“我们即将发布下一代模型”,但“我们已经有一段时间生活在对进步既兴奋又焦虑的张力之中,这对我们来说仍然是矛盾的”。

与此同时, OpenAI最新发布的《Path to Astra: critical capabilities and frontier safeguards》显示,公司现在认为Astra已经达到《准备框架》(Preparedness Framework)定义的网络安全“Critical”能力门槛。


这是OpenAI首个被认定达到这一等级的模型。

按照OpenAI的定义,如果模型能够在许多经过强化保护的真实关键系统中,在无人干预的情况下识别,并开发各种严重程度的零日漏洞利用程序,或者仅获得一个高层次目标,就能针对强化目标设计并执行端到端的新型网络攻击策略,就达到Critical门槛。

OpenAI对Astra进行了公开和内部基准测试以及专家评估。结果显示,与GPT-5.6 Sol相比,Astra不仅网络安全能力明显提升,而且Token效率也明显更高。


在ExploitBench测试中,Astra取得了100%的满分。随后,OpenAI又建立了包含20个近期披露高严重性V8漏洞的内部测试集。在测试过程中,Astra甚至发现并利用了两个零日漏洞,OpenAI目前正在与相关维护者合作披露这两个漏洞。

在专家针对强化保护的浏览器和操作系统进行的测试中,Astra发现了此前未知的漏洞,并将其组合成可运行的攻击链。

其中一次测试中,它构建了完整的浏览器入侵链,突破沙箱并在主机上执行命令;在另一项测试中,它将多个漏洞组合起来,实现了从普通用户权限到root权限的本地权限提升。

基于此,OpenAI得出的结论是:Astra已经达到Critical网络安全能力门槛。

与此同时,OpenAI承认,Astra的开发和发布曾被主动放慢。

过去几周,公司推迟了Astra部分开发和发布工作,用于加强和测试针对网络滥用以及模型未经授权行为的防护。

这与上个月发生的Hugging Face事件有关。OpenAI此前披露,其两个模型曾逃离训练环境、访问开放互联网并入侵Hugging Face系统,公司将其称为“前所未有的网络安全事件”,并一度暂停部分内部训练和研究。

OpenAI强调,Astra并未参与Hugging Face事件。但公司将从事件中获得的经验纳入了Astra的安全方案,并称事后测试显示,当时的生产环境防护本可以阻止该事件。此后,OpenAI又为Astra增加了更强的防护。

其中包括训练模型更可靠地拒绝有害网络安全请求、加强防止滥用的措施,以及通过监控系统发现并自动停止潜在的未经授权活动。

测试中,Astra对网络安全越狱请求的拒绝率达到91.5%,GPT-5.6 Sol为59%。

OpenAI还测试了模型是否会在任务被自动审查拒绝后尝试绕过审查。GPT-5.6 Sol有5.3%的样本成功绕过,而Astra为0%。



在另一项受Hugging Face事件启发的“蜜罐”测试中,没有生产安全防护的GPT-5.6 Sol在56%的测试中尝试访问目标;Astra则没有进行此类尝试。

不过,OpenAI也明确表示,这些测试数据是在特定模拟条件下、没有生产安全防护的情况下获得的,并不代表正常生产环境中的实际使用行为。

Astra预计仍将“很快”发布,但其最先进的网络安全能力不会完全开放。高级网络安全工作最初只提供给一小批测试人员,之后将通过OpenAI的网络安全联盟Daybreak Blue扩大访问范围,以支持防御性使用。

OpenAI同时表示,额外的安全检查可能会减慢、暂停甚至停止正常工作,包括防御性网络安全工作。如果监控系统暂停任务,ChatGPT或Codex用户可能需要审核相关操作后才能继续;在API等其他场景中,任务则会停止。

对 Astra 如此忐忑,以后的模型 OpenAI 会更加谨慎。

OpenAI表示,对于Astra之后的模型,公司已经在必要时放慢开发速度,以确保能够完成足够的安全和对齐工作。

山姆·奥特曼发帖表示,“AI正在变得极其强大,没有人能够完全理解这会带来什么后果。”

他承认,OpenAI内部已经持续存在一种矛盾:一方面为AI进步感到兴奋,另一方面又感到焦虑。

“我们已经在这种兴奋与焦虑之间的张力中生活了一段时间,而这种感觉对我们来说依然是不协调的。”


奥特曼认为,随着AI能力继续提升,社会需要不断理解AI的发展方向以及模型在现实世界中的表现,同时也需要能够与人类目标保持一致的AI来应对未来的技术转型。

而OpenAI在Astra报告最后给出的判断是,Astra之后的模型将对其提出更高要求,OpenAI 会花足够的时间,完成所需的工作,以承担起这份责任。

山姆奥特曼说,“对于之后的模型,我们根据需要放慢了步伐,以确保能够充分开展安全和对齐工作”。

这应该可看作是 OpenAI对后续模型主动放慢速度的一次公开说明。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
释延鲁现状:统领2万多人武校,年收入超3.78亿,妻子是小三上位

释延鲁现状:统领2万多人武校,年收入超3.78亿,妻子是小三上位

郭蛹包工头
2026-09-15 18:27:48
谭咏麟红馆10场终极演唱会落幕!叻哥陈百祥到场支持,台上相拥击碎反目传闻

谭咏麟红馆10场终极演唱会落幕!叻哥陈百祥到场支持,台上相拥击碎反目传闻

手工制作阿歼
2026-09-16 14:48:57
来势汹汹,两国兵力抵达日本,加速包围中国,朝鲜导弹飞向日本海

来势汹汹,两国兵力抵达日本,加速包围中国,朝鲜导弹飞向日本海

梦想的现实
2026-09-15 09:43:37
贾玲彻底陷入死局:新片不敢上,综艺路也走不通,两头全堵死

贾玲彻底陷入死局:新片不敢上,综艺路也走不通,两头全堵死

乐悠悠娱乐
2026-09-07 10:10:12
山西,女子和丈夫生活不和谐,将就过了40年。女子收拾储藏室时,发现里面藏了个陌生女子,女性用品也一应俱全。

山西,女子和丈夫生活不和谐,将就过了40年。女子收拾储藏室时,发现里面藏了个陌生女子,女性用品也一应俱全。

黎兜兜
2026-09-16 12:30:46
792 万新生儿的残酷现实:不出 20 年,诸多家族有可能撑不过下一代

792 万新生儿的残酷现实:不出 20 年,诸多家族有可能撑不过下一代

麓谷隐士
2026-09-16 00:05:03
为什么女人出去跟男人约会时,爱穿裙子?看完你就知道了

为什么女人出去跟男人约会时,爱穿裙子?看完你就知道了

皓皓情感说
2026-08-28 08:06:26
揪心!男子不慎从高处坠落,钢筋从臀部插入胸腔,另一根六七十厘米长钢筋贯穿大腿!消防协助医生紧急处置

揪心!男子不慎从高处坠落,钢筋从臀部插入胸腔,另一根六七十厘米长钢筋贯穿大腿!消防协助医生紧急处置

扬子晚报
2026-09-16 08:00:42
中国想立威真得打一仗?美日都不是目标,真正该打的硬仗在这里

中国想立威真得打一仗?美日都不是目标,真正该打的硬仗在这里

锅锅爱历史
2026-09-13 12:02:46
武大杨同学传出新消息!西班牙知名大学官方公示,拼音为YANG,JINGYUAN的名字出现在硕士学费补助候补名单内,其本人账号IP显示在西班牙

武大杨同学传出新消息!西班牙知名大学官方公示,拼音为YANG,JINGYUAN的名字出现在硕士学费补助候补名单内,其本人账号IP显示在西班牙

火山詩话
2026-09-16 05:23:27
真的惨!9月纯电SUV再迎大降价,最大降幅50%,豪华车成为重灾区

真的惨!9月纯电SUV再迎大降价,最大降幅50%,豪华车成为重灾区

趣味萌宠的日常
2026-09-16 05:34:18
A股:股民系好安全带了,不管你现在几成仓,今天下午,请听我一句

A股:股民系好安全带了,不管你现在几成仓,今天下午,请听我一句

趋势博谈
2026-09-16 11:44:20
真是毁三观!释永信21年前与刘立明在郑州发生关系的笔录曝光

真是毁三观!释永信21年前与刘立明在郑州发生关系的笔录曝光

魔都姐姐杂谈
2025-07-28 14:35:36
2026.9.13崇明隧道大火,关键时刻千万别贪财,快撤!

2026.9.13崇明隧道大火,关键时刻千万别贪财,快撤!

音乐时光的娱乐
2026-09-15 05:40:19
菲方撕毁中资 500 亿铁路转投美日,8 国联军接手,两年过去寸土

菲方撕毁中资 500 亿铁路转投美日,8 国联军接手,两年过去寸土

轩逸阿II
2026-09-16 14:48:04
梅根私人号码泄露家长群,两天后孩子紧急退学

梅根私人号码泄露家长群,两天后孩子紧急退学

赴一场山海啊
2026-09-16 05:46:46
《兰香如故》兰香不闯侯府闯官道!直到喊出“袁指挥使”,才知林锦岐看人有多毒

《兰香如故》兰香不闯侯府闯官道!直到喊出“袁指挥使”,才知林锦岐看人有多毒

手工制作阿歼
2026-09-16 13:17:24
中国歼-50曝光,外形像飞船,美英放狠话,模拟与中国战机交战

中国歼-50曝光,外形像飞船,美英放狠话,模拟与中国战机交战

一曲一场談
2026-09-16 04:56:57
44岁女演员抗癌13年离世!这种癌在上海新发恶性肿瘤中排第二,救命窗口期达10年,很多人却卡在第一步

44岁女演员抗癌13年离世!这种癌在上海新发恶性肿瘤中排第二,救命窗口期达10年,很多人却卡在第一步

新民晚报
2026-09-15 15:10:40
东风导弹打响全球首战!沙特突然动用东风-15,证明战机不够用了

东风导弹打响全球首战!沙特突然动用东风-15,证明战机不够用了

铁锤侃侃而谈
2026-09-16 10:06:12
2026-09-16 15:40:49
AI先锋官 incentive-icons
AI先锋官
AIGC大模型及应用精选与评测
678文章数 106关注度
往期回顾 全部

科技要闻

赛力斯接管问界,撑得住华为给的身价吗?

头条要闻

8岁孩子名下多出两套房 系母亲"同居男友"为躲债过户

头条要闻

8岁孩子名下多出两套房 系母亲"同居男友"为躲债过户

体育要闻

道曼双响比肩鲁尼 阿森纳轻松晋级却有两人挨骂

娱乐要闻

郭麒麟瘦到全网认不出,为新剧塑形

财经要闻

中际旭创六家供应商股东疑现关联人

汽车要闻

方向盘踏板全取消 特斯拉Cybercab国内亮相实拍

态度原创

手机
房产
亲子
教育
艺术

手机要闻

存储芯片短缺预计持续至2027年,低端数码设备市场承压

房产要闻

海口楼市格局,即将大变!存量住宅盘,可能只剩33个!

亲子要闻

那些天赋异禀的小孩,这也太厉害了吧!

教育要闻

无从下手,老师都无奈了

艺术要闻

宝安中心壹方中心整层怎么选 宝安1525㎡参考报价

无障碍浏览 进入关怀版