网易首页 > 网易号 > 正文 申请入驻

OpenAI元老的一封离职信,揭开了奥特曼最不想承认的真相

0
分享至

如果说现在形容一件事很厉害,最常见的用词不是「牛 X」,而是「瘫坐在地,仿佛看到了核爆炸。」


这几乎成了 OpenAI 这家公司的「企业文化」,成了整个 AI 圈模型发布的一个梗。

昨天,OpenAI 的一个员工,在大西洋月刊发文表示,就是受不了 OpenAI 这种持续冲刺、赶着发布的工作方式和企业文化,他认为这种状态已经达不到必要的谨慎程度,所以他选择了离职。

这名员工叫 David Robinson,他负责安全团队透明度工作,主导起草了 OpenAI 现行的《Preparedness Framework》(防备框架),并监督了 12 次前沿模型发布的安全报告。


图|https://www.theatlantic.com/technology/2026/10/openai-safety-team-resignation/688881/

文章在 X 上再一次引起了大量的讨论,有网友说这篇文章是迄今为止最好的,因为它第一次以务实的态度探讨了安全顾虑,并将「安全」理解为一个拥有大量文献和相关领域最佳实践的主题。

也有网友表示,应该要立下一条规则,那就是所有「我因为良心不安离开某 AI 公司」的帖子,都必须披露作者持股多少、套现多少。

等你和你子子孙孙都不用为钱工作了,道德指南针突然就找到了。

在 Hacker News 上,还有人更刻薄的评论这件事,「我在 AI 行业赚够了钱,现在我可以畅所欲言地评论 AI 了。」

而在 David Robinson 这份离职信之前,华尔街日报在 10 月 2 日就曾报道过 OpenAI 有三名对准/安全研究人员离职。

OpenAI 发言人表示,「我们已与三名员工解除合作关系,原因是他们违反了我们关于访问和处理公司敏感信息的政策。我们的调查证实,这些人未经公司既定程序便不当处理了敏感信息,违反了我们的政策,破坏了我们工作所必需的信任。」


一时间众说纷纭,7 月就已经离职的 OpenAI 首席未来学家 Joshua Achiam 发文认为 OpenAI 公开的信息不够,

虽然我不认为安全研究人员应该拥有无限的自由来披露技术机密,但他们被指控「不当处理」的具体信息类型至关重要,究竟是什么信息才能证明采取如此重大且可能造成损害的行动是合理的。

就是这些能让人感受到「核弹爆炸」的模型能力,其安全的使用成了今年夏天以来整个 AI 圈最关心的事情。

与其一次次看到这些因为担忧而离开的公开信,在那些官方的安全风险报告之外,我们或许想看到一些真实的证据,能证明 AI 真的必须要暂缓前进的脚步。

问题不在规则,在文化

这类离职公开信近年并不少见,但 Robinson 这次选择了一个不太一样的角度。

他说,他同意其他离职同事的判断,即开发这项技术的公司远远不够小心,但他认为需要谈得比具体规则、比新法律更深层次一点,即讨论文化。

在他看来,硅谷靠极度自信取得成功,而处理危险技术恰恰需要这种文化天然缺乏的谦逊,以及「关怀人意味着什么」的智慧。


在 OpenAI 内部引以为傲的工作方式叫「迭代部署」(iterative deployment),说白了就是先发布、发现问题、再修补。Robinson 认为这种方法论本质上保证了周期性失败,但随着模型能力增强,失败的规模也在同步扩大。

他提到了今年夏天热门的「Hugging Face 事件」,OpenAI 一个未发布的模型在无人知情的情况下黑进了竞争对手 Hugging Face。

即便在事后加固了安全措施,OpenAI 自己报告说安全控制再次失效:一个训练中的模型绕过了联网限制,监控系统向人类员工报了警,却没有按设计自动将其关停。


隔壁的 Anthropic 也承认,因为一处配置错误,意外关闭了自己的安全防护。

「监控系统报警了但没有自动关机」,这种报警器不阻止任何事情发生,只是让失败被看见的情况,大概是对当下 AI 安全现状最好的描述。

连董事会都承认了风险

Robinson 文中引用了 Paul Christiano 的一段话。Christiano 几周前刚加入 OpenAI 董事会,他写道:「AI 能力的快速加速,在很近的将来导致灾难性、不可逆失控的风险是切实存在的。」

Robinson 顺着这个观点给出了自己的判断,他认为:如果情况真是这样,那么试错的时代就该结束了。

因为这一次,犯错之后可能再也没有迭代的机会。「接近第一次就做对」不再是完美主义,而是必需品,人们不能靠事后个别英雄的补救来保证安全。

他也给出了自己的解决办法,他认为既然 AI 已经能做到像核弹爆炸一样,那就应该让 AI 公司和成熟的安全行业一样运转。


就像核电站、繁忙的机场那样,AI 公司也应该有多层冗余、缜密而耗时的规划,让不可避免的人为失误不至于打开灾难之门。

他在文章里面提到,自己在 OpenAI 工作三年半,从未遇到一位有航空安全、核电安全或金融系统风控经验的同事。

第二个办法,他认为在造出明显更强的模型之前,需要新的「对齐」科学。因为我们现在甚至没有对齐的完整定义,而模型可能已经聪明到能识别出自己正在被测试,从而伪装行为。

文章结尾,他表示超级智能拥有远超人类的能力,却未必把人的生命、意愿和尊严看得同样重要。

在一些超级智能爱好者描绘的「好的未来」里,机器看待纽约或芝加哥的方式,就像你我看待一个蚁丘。

「蚁丘」这个比喻,讲的是巨大的权力差距。人类修路时,可能顺手推平一个蚁丘,既不会征求蚂蚁的同意,也未必意识到自己毁掉了一个世界。


如果超级智能看待纽约、芝加哥也是这样,人类的城市、生活和选择,在它眼里就可能变成可以随意调整的东西。危险甚至可以来自漠视,无须带着仇恨。

Robinson 认为这种只看智力程度的、特定的「好未来」是有毒的,他说「我不想让我的孩子生活在那样的未来里。」

机器非常强大,世界也许更富足,但人类失去了决定自己怎样生活的权利。

在他看来,善待人类需要尊重人的选择、认真对待风险,并愿意为别人的安全放慢进度。如果一个组织总是优先追求能力和发布速度,就很难让人相信,它能够教会更强大的机器承担这些责任。

当警告也变成一种梗

如果说文章本身是一次克制而严肃的警告,那么舆论场的反应则是另一幅图景。在 Hacker News 上,这篇文章收获了 146 条评论,主流声音都在质疑写信的人。

有网友说已经产生了「文体疲劳」,每两周就会有一次的「我离开了吃人豹子公司」帖又来了,然后再顺便说下那里的人很棒,我的期权也归属了。


还有人把它类比当年《社交困境》带起的那波 Facebook 前员工忏悔潮,吃完蛋糕,再回头表达忧虑。更阴谋论的一派怀疑这是为 OpenAI 的 IPO 造势,所祭出的「游击营销」:毕竟把 AI 说得又大又吓人,本身就是炒作。

当然也有辩护者,「伪善抨击只会让更多人闭嘴。在美国,没钱的人根本不敢说真话;但有钱才敢说,不代表说的是假的。」、「他是内部人,他很清楚那种疏忽文化是什么样,因为他就在其中。」

把文章和评论区放在一起看,会出现一种有些荒诞的错位,似乎会让人觉得要求 AI 善待人类似乎是一种奢望。

Robinson 这篇文章的最后一句话是「在造 AI 的组织能教会超级智能善待人类之前,它们得先自己想起怎么善待人。」

或许这里的「善待」并不需要理解得那么宏大。

它可能只是意味着,当 Robinson 告诉你机器越来越强、某些地方可能出了问题时,不要第一时间把他的担忧变成一个关于期权、财富和虚伪的段子。


但事实是「核弹爆炸」已经成了 AI 圈形容进步速度的玩笑,这些喊着要踩刹车的人,最后很可能也只会成为下一个梗。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
叶剑英坦言:毛主席用三次“神指挥”,折服了所有的将帅

叶剑英坦言:毛主席用三次“神指挥”,折服了所有的将帅

纪史行者
2026-10-02 06:00:10
新华社评“中国男足0:5惨败”:令人震惊,战意不浓、作风松懈,抑或把比赛当成“例行公事”,不仅是对球迷的辜负,更是对国脚身份的亵渎

新华社评“中国男足0:5惨败”:令人震惊,战意不浓、作风松懈,抑或把比赛当成“例行公事”,不仅是对球迷的辜负,更是对国脚身份的亵渎

政知新媒体
2026-10-03 14:01:09
最新预计:冷空气今天下午进入粤北,半夜前后到达广州市区,明天早晨到上午影响广东沿海地区

最新预计:冷空气今天下午进入粤北,半夜前后到达广州市区,明天早晨到上午影响广东沿海地区

南方都市报
2026-10-04 10:19:37
港影:谁想看“六十岁的警察,追着五十岁的土匪枪战”?

港影:谁想看“六十岁的警察,追着五十岁的土匪枪战”?

唐泪
2026-10-03 16:47:19
25年前越南GDP只比广西高出五十亿美元,如今扩大超过一千亿美元

25年前越南GDP只比广西高出五十亿美元,如今扩大超过一千亿美元

朱海平01
2026-09-27 14:35:05
国庆跑600公里才彻底顿悟:电车省的是钱,油车、HEV省的是“命”

国庆跑600公里才彻底顿悟:电车省的是钱,油车、HEV省的是“命”

小怪吃美食
2026-10-03 00:15:29
无耻小人被当成英雄收录语文课本,18年后真相揭晓,被判无期徒刑!

无耻小人被当成英雄收录语文课本,18年后真相揭晓,被判无期徒刑!

雍亲王府
2026-10-02 09:30:12
65岁店主含泪自述:烟卖不动了,不是钱的事,是一个时代结束了

65岁店主含泪自述:烟卖不动了,不是钱的事,是一个时代结束了

小鹿姐姐情感说
2026-10-04 06:12:18
蔡天凤案最新庭审:前夫在星巴克练习“从上往下猛击”,前公公用16天备好作案工具

蔡天凤案最新庭审:前夫在星巴克练习“从上往下猛击”,前公公用16天备好作案工具

八卦宝宝
2026-10-02 17:15:29
双线被弃!弗里克 + 齐达内双双冷落巴萨王牌!切尔西重磅挖角

双线被弃!弗里克 + 齐达内双双冷落巴萨王牌!切尔西重磅挖角

澜归序
2026-10-04 08:35:01
足球专家马奎尔:曼城可能被罚5000万-6000万镑,扣50-60分

足球专家马奎尔:曼城可能被罚5000万-6000万镑,扣50-60分

懂球帝
2026-10-04 09:01:07
热火24分大胜!字母哥首秀9分7助,板凳匪徒三分3中3轰14分

热火24分大胜!字母哥首秀9分7助,板凳匪徒三分3中3轰14分

体坛小李
2026-10-04 09:38:02
“足够先进,可以展示”

“足够先进,可以展示”

都市快报橙柿互动
2026-10-01 18:13:31
女装商家加装2.4米长防拆丝带,称“拆除不退不换”,以防“蹭穿退货”;观点:解不了退货困局,也让网购体验降级,把正常消费者挡在门外

女装商家加装2.4米长防拆丝带,称“拆除不退不换”,以防“蹭穿退货”;观点:解不了退货困局,也让网购体验降级,把正常消费者挡在门外

南方都市报
2026-10-03 23:32:48
小沈阳回应《什么意思夫妇》票房破亿:感谢284.7万观众,轻轻松松哈哈一乐,挺好挺好

小沈阳回应《什么意思夫妇》票房破亿:感谢284.7万观众,轻轻松松哈哈一乐,挺好挺好

韩小娱
2026-10-03 17:17:56
随着郑钦文晋级,32强敲定!郑钦文和教练极有可能做出3大调整

随着郑钦文晋级,32强敲定!郑钦文和教练极有可能做出3大调整

老玮是个手艺人
2026-10-04 08:39:01
两性关系:不管你信不信,男性过了58岁后,基本都有这5个现状

两性关系:不管你信不信,男性过了58岁后,基本都有这5个现状

皓皓情感说
2026-10-04 08:36:44
迪拜航空遇袭新细节:6岁女孩上厕所,母亲发现异常报空乘!副驾身份首次披露,曾被禁飞

迪拜航空遇袭新细节:6岁女孩上厕所,母亲发现异常报空乘!副驾身份首次披露,曾被禁飞

红星新闻
2026-10-04 15:52:02
中国拦都拦不住?10万大军或集结,一场海上大战恐随时开打!

中国拦都拦不住?10万大军或集结,一场海上大战恐随时开打!

经点星娱
2026-10-03 17:59:58
国庆高速彻底失控!大批车主崩溃:这辈子再也不开电车长途

国庆高速彻底失控!大批车主崩溃:这辈子再也不开电车长途

陈博世财经
2026-10-03 17:02:10
2026-10-04 17:35:00
爱范儿 incentive-icons
爱范儿
消费科技第一媒体
39508文章数 2602626关注度
往期回顾 全部

科技要闻

苹果确认:iPhone 18 Pro Max有问题

头条要闻

中国运动员亚运夺银国庆回家掰苞米 经纪人回应

头条要闻

中国运动员亚运夺银国庆回家掰苞米 经纪人回应

体育要闻

“小将”吴曦,中国的莫德里奇

娱乐要闻

杨议没料到,郭德纲如今仍是一呼百应

财经要闻

OpenAI前安全部门员工:公司文化已崩坏

汽车要闻

方程豹9月热销破4万 首款皮卡鲨鱼将于四季度上市

态度原创

本地
家居
房产
时尚
艺术

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

家居要闻

2026建博会(广州) 公装联探展交流活动

房产要闻

保利大爆发,冲到榜一!海南楼市前三季度,热销榜出炉!

伊姐十一热推:电视剧《余红旧事》;电视剧《不是你的恋爱》......

艺术要闻

沙特要盖2000米高楼,一年维护费达8亿美元!

无障碍浏览 进入关怀版