网易首页 > 网易号 > 正文 申请入驻

OpenAI元老的一封离职信,揭开了奥特曼最不想承认的真相

0
分享至

如果说现在形容一件事很厉害,最常见的用词不是「牛 X」,而是「瘫坐在地,仿佛看到了核爆炸。」


这几乎成了 OpenAI 这家公司的「企业文化」,成了整个 AI 圈模型发布的一个梗。

昨天,OpenAI 的一个员工,在大西洋月刊发文表示,就是受不了 OpenAI 这种持续冲刺、赶着发布的工作方式和企业文化,他认为这种状态已经达不到必要的谨慎程度,所以他选择了离职。

这名员工叫 David Robinson,他负责安全团队透明度工作,主导起草了 OpenAI 现行的《Preparedness Framework》(防备框架),并监督了 12 次前沿模型发布的安全报告。


图|https://www.theatlantic.com/technology/2026/10/openai-safety-team-resignation/688881/

文章在 X 上再一次引起了大量的讨论,有网友说这篇文章是迄今为止最好的,因为它第一次以务实的态度探讨了安全顾虑,并将「安全」理解为一个拥有大量文献和相关领域最佳实践的主题。

也有网友表示,应该要立下一条规则,那就是所有「我因为良心不安离开某 AI 公司」的帖子,都必须披露作者持股多少、套现多少。

等你和你子子孙孙都不用为钱工作了,道德指南针突然就找到了。

在 Hacker News 上,还有人更刻薄的评论这件事,「我在 AI 行业赚够了钱,现在我可以畅所欲言地评论 AI 了。」

而在 David Robinson 这份离职信之前,华尔街日报在 10 月 2 日就曾报道过 OpenAI 有三名对准/安全研究人员离职。

OpenAI 发言人表示,「我们已与三名员工解除合作关系,原因是他们违反了我们关于访问和处理公司敏感信息的政策。我们的调查证实,这些人未经公司既定程序便不当处理了敏感信息,违反了我们的政策,破坏了我们工作所必需的信任。」


一时间众说纷纭,7 月就已经离职的 OpenAI 首席未来学家 Joshua Achiam 发文认为 OpenAI 公开的信息不够,

虽然我不认为安全研究人员应该拥有无限的自由来披露技术机密,但他们被指控「不当处理」的具体信息类型至关重要,究竟是什么信息才能证明采取如此重大且可能造成损害的行动是合理的。

就是这些能让人感受到「核弹爆炸」的模型能力,其安全的使用成了今年夏天以来整个 AI 圈最关心的事情。

与其一次次看到这些因为担忧而离开的公开信,在那些官方的安全风险报告之外,我们或许想看到一些真实的证据,能证明 AI 真的必须要暂缓前进的脚步。

问题不在规则,在文化

这类离职公开信近年并不少见,但 Robinson 这次选择了一个不太一样的角度。

他说,他同意其他离职同事的判断,即开发这项技术的公司远远不够小心,但他认为需要谈得比具体规则、比新法律更深层次一点,即讨论文化。

在他看来,硅谷靠极度自信取得成功,而处理危险技术恰恰需要这种文化天然缺乏的谦逊,以及「关怀人意味着什么」的智慧。


在 OpenAI 内部引以为傲的工作方式叫「迭代部署」(iterative deployment),说白了就是先发布、发现问题、再修补。Robinson 认为这种方法论本质上保证了周期性失败,但随着模型能力增强,失败的规模也在同步扩大。

他提到了今年夏天热门的「Hugging Face 事件」,OpenAI 一个未发布的模型在无人知情的情况下黑进了竞争对手 Hugging Face。

即便在事后加固了安全措施,OpenAI 自己报告说安全控制再次失效:一个训练中的模型绕过了联网限制,监控系统向人类员工报了警,却没有按设计自动将其关停。


隔壁的 Anthropic 也承认,因为一处配置错误,意外关闭了自己的安全防护。

「监控系统报警了但没有自动关机」,这种报警器不阻止任何事情发生,只是让失败被看见的情况,大概是对当下 AI 安全现状最好的描述。

连董事会都承认了风险

Robinson 文中引用了 Paul Christiano 的一段话。Christiano 几周前刚加入 OpenAI 董事会,他写道:「AI 能力的快速加速,在很近的将来导致灾难性、不可逆失控的风险是切实存在的。」

Robinson 顺着这个观点给出了自己的判断,他认为:如果情况真是这样,那么试错的时代就该结束了。

因为这一次,犯错之后可能再也没有迭代的机会。「接近第一次就做对」不再是完美主义,而是必需品,人们不能靠事后个别英雄的补救来保证安全。

他也给出了自己的解决办法,他认为既然 AI 已经能做到像核弹爆炸一样,那就应该让 AI 公司和成熟的安全行业一样运转。


就像核电站、繁忙的机场那样,AI 公司也应该有多层冗余、缜密而耗时的规划,让不可避免的人为失误不至于打开灾难之门。

他在文章里面提到,自己在 OpenAI 工作三年半,从未遇到一位有航空安全、核电安全或金融系统风控经验的同事。

第二个办法,他认为在造出明显更强的模型之前,需要新的「对齐」科学。因为我们现在甚至没有对齐的完整定义,而模型可能已经聪明到能识别出自己正在被测试,从而伪装行为。

文章结尾,他表示超级智能拥有远超人类的能力,却未必把人的生命、意愿和尊严看得同样重要。

在一些超级智能爱好者描绘的「好的未来」里,机器看待纽约或芝加哥的方式,就像你我看待一个蚁丘。

「蚁丘」这个比喻,讲的是巨大的权力差距。人类修路时,可能顺手推平一个蚁丘,既不会征求蚂蚁的同意,也未必意识到自己毁掉了一个世界。


如果超级智能看待纽约、芝加哥也是这样,人类的城市、生活和选择,在它眼里就可能变成可以随意调整的东西。危险甚至可以来自漠视,无须带着仇恨。

Robinson 认为这种只看智力程度的、特定的「好未来」是有毒的,他说「我不想让我的孩子生活在那样的未来里。」

机器非常强大,世界也许更富足,但人类失去了决定自己怎样生活的权利。

在他看来,善待人类需要尊重人的选择、认真对待风险,并愿意为别人的安全放慢进度。如果一个组织总是优先追求能力和发布速度,就很难让人相信,它能够教会更强大的机器承担这些责任。

当警告也变成一种梗

如果说文章本身是一次克制而严肃的警告,那么舆论场的反应则是另一幅图景。在 Hacker News 上,这篇文章收获了 146 条评论,主流声音都在质疑写信的人。

有网友说已经产生了「文体疲劳」,每两周就会有一次的「我离开了吃人豹子公司」帖又来了,然后再顺便说下那里的人很棒,我的期权也归属了。


还有人把它类比当年《社交困境》带起的那波 Facebook 前员工忏悔潮,吃完蛋糕,再回头表达忧虑。更阴谋论的一派怀疑这是为 OpenAI 的 IPO 造势,所祭出的「游击营销」:毕竟把 AI 说得又大又吓人,本身就是炒作。

当然也有辩护者,「伪善抨击只会让更多人闭嘴。在美国,没钱的人根本不敢说真话;但有钱才敢说,不代表说的是假的。」、「他是内部人,他很清楚那种疏忽文化是什么样,因为他就在其中。」

把文章和评论区放在一起看,会出现一种有些荒诞的错位,似乎会让人觉得要求 AI 善待人类似乎是一种奢望。

Robinson 这篇文章的最后一句话是「在造 AI 的组织能教会超级智能善待人类之前,它们得先自己想起怎么善待人。」

或许这里的「善待」并不需要理解得那么宏大。

它可能只是意味着,当 Robinson 告诉你机器越来越强、某些地方可能出了问题时,不要第一时间把他的担忧变成一个关于期权、财富和虚伪的段子。


但事实是「核弹爆炸」已经成了 AI 圈形容进步速度的玩笑,这些喊着要踩刹车的人,最后很可能也只会成为下一个梗。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
国王主帅:雷诺休赛期增重了约9公斤 他的天赋非常出众

国王主帅:雷诺休赛期增重了约9公斤 他的天赋非常出众

北青网-北京青年报
2026-10-04 17:34:13
国产没有添加剂的面粉,这7个牌子值得看看,揉面时闻得到麦香

国产没有添加剂的面粉,这7个牌子值得看看,揉面时闻得到麦香

房产衫哥
2026-09-13 19:53:42
女子怀疑医生在其子宫装监听器,手机一放歌就异常!两次告上法庭

女子怀疑医生在其子宫装监听器,手机一放歌就异常!两次告上法庭

砚田文化
2026-09-18 08:34:48
昔日国乒名将陈龙灿发声!张本宇留日另有原因,当年选择不简单

昔日国乒名将陈龙灿发声!张本宇留日另有原因,当年选择不简单

潋滟晴方DAY
2026-08-13 13:06:45
詹姆斯:我们还没有分配进攻角色,无所谓这对我来说不重要

詹姆斯:我们还没有分配进攻角色,无所谓这对我来说不重要

懂球帝
2026-10-04 13:56:09
深圳APEC开幕在即,高市称谓被撤!中方拒认“首相级”外交名分

深圳APEC开幕在即,高市称谓被撤!中方拒认“首相级”外交名分

麓谷隐士
2026-10-04 17:33:46
“充电排大队全怪增程车多?” 高速服务区上演抢桩大战:有车主排队上百号,闪充都变“慢充”了

“充电排大队全怪增程车多?” 高速服务区上演抢桩大战:有车主排队上百号,闪充都变“慢充”了

新浪财经
2026-10-02 16:56:00
德国总理默茨突访基辅,将宣布13.5亿欧元援乌资金,敲定德乌联合生产多种无人机的协议

德国总理默茨突访基辅,将宣布13.5亿欧元援乌资金,敲定德乌联合生产多种无人机的协议

上观新闻
2026-10-04 15:30:21
纪委核查通讯记录的独门手段,有些人到被查都不知道露的馅

纪委核查通讯记录的独门手段,有些人到被查都不知道露的馅

职场资深秘书
2026-10-04 14:47:51
手握十万重兵的八路军猛将,55年授衔仅少将,毛主席:搞错了吧?

手握十万重兵的八路军猛将,55年授衔仅少将,毛主席:搞错了吧?

阿器谈史
2026-10-01 17:08:50
板仓滉:新西兰有一名非常优秀的前锋,我对他印象很深

板仓滉:新西兰有一名非常优秀的前锋,我对他印象很深

懂球帝
2026-10-04 16:45:12
为什么必须尽快统一台湾?四大核心原因,越拖代价越大

为什么必须尽快统一台湾?四大核心原因,越拖代价越大

世界有奇事
2026-09-29 09:21:55
金价走势已成定局?若无意外,10月开始,黄金价格或迎来3大转变

金价走势已成定局?若无意外,10月开始,黄金价格或迎来3大转变

说故事的阿袭
2026-10-04 09:49:46
布朗尼:每天防守东契奇和里夫斯会让我们的防守变强

布朗尼:每天防守东契奇和里夫斯会让我们的防守变强

北青网-北京青年报
2026-10-04 17:34:03
外星人真打起来了?前美国情报官称有十余起坠毁,证据到底在哪里

外星人真打起来了?前美国情报官称有十余起坠毁,证据到底在哪里

Science科学说
2026-10-04 08:20:08
电影国庆档,彻底垮了

电影国庆档,彻底垮了

刚刚讲商业
2026-10-04 11:05:34
易建联为妻儿建的洛杉矶豪宅烧成灰,如今2000平空地估价曝光,数字让人意外,中介爆出实情

易建联为妻儿建的洛杉矶豪宅烧成灰,如今2000平空地估价曝光,数字让人意外,中介爆出实情

LULU生活家
2026-08-31 15:33:38
如果中国不派兵入朝,全力解放台湾岛,有机会全歼国民党军吗?

如果中国不派兵入朝,全力解放台湾岛,有机会全歼国民党军吗?

小松历史菌
2026-10-01 22:34:48
杭州一男子做推拿,迷迷糊糊中裤子被脱,技师举动让他惊出一身汗

杭州一男子做推拿,迷迷糊糊中裤子被脱,技师举动让他惊出一身汗

社会日日鲜
2026-08-10 16:38:30
梁洛施马浴柯十指紧扣炸街!高半头又怎样?她笑得一脸幸福

梁洛施马浴柯十指紧扣炸街!高半头又怎样?她笑得一脸幸福

开烟酒店的明哥
2026-10-03 22:26:36
2026-10-04 18:16:49
爱范儿 incentive-icons
爱范儿
消费科技第一媒体
39508文章数 2602626关注度
往期回顾 全部

科技要闻

苹果确认:iPhone 18 Pro Max有问题

头条要闻

"我差点就去服兵役了" 韩男足队长一句话惹恼半个国家

头条要闻

"我差点就去服兵役了" 韩男足队长一句话惹恼半个国家

体育要闻

“小将”吴曦,中国的莫德里奇

娱乐要闻

杨议没料到,郭德纲如今仍是一呼百应

财经要闻

OpenAI前安全部门员工:公司文化已崩坏

汽车要闻

方程豹9月热销破4万 首款皮卡鲨鱼将于四季度上市

态度原创

本地
艺术
时尚
游戏
公开课

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

艺术要闻

长江打捞出一石碑,无数大师都临摹过它,被誉为书坛“无冕之王”!

伊姐十一热推:电视剧《余红旧事》;电视剧《不是你的恋爱》......

《老滚5》开发者都没想到 太多玩家根本没按剧情走

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版