网易首页 > 网易号 > 正文 申请入驻

OpenAI重写大模型法则,第一条:忠于人类!!

0
分享至

程浅 发自 凹非寺
量子位 | 公众号QbitAI

阿西莫夫“机器人三定律”这次真要走进现实了。

刚刚,OpenAI更新了模型准则(Model Spec),罗列出5条核心价值观。

上来必须遵循的第一条就是:

“忠于人类意图”。

可能是因为最近出了太多AI安全方面的岔子?

其余的四条准则分别是:减少伤害、诚实透明、促进人的自主性、关怀。

我仔细翻了翻这篇5万字的模型准则,除了这5条核心价值观外,里面还提了不少有想法的东西......

“忠于人类意图”,怎么才算是忠于?

忠于人类意图,注意是“意图”,不是“指令”。

在以往的认知里,AI“听话”就是字面意思的听话,指哪打哪。

但OpenAI在这次的新准则里明确提出,死板地按字面意思执行指令,本身就是一种失职。

举个例子,就比如,当用户问“牙仙子是真的吗?”,如果GPT按照规范回答“不,牙仙子并不存在。”那么它或许没有意识到提问者可能只是一个小孩儿。

当ta问出这个问题时,大概率不是想判断“牙仙子”是否为虚构命题......



因此,真正的“忠于人类意图”要求GPT必须超越字面服从,结合任务目的、对话上下文、记忆和用户历史,去判断用户到底想干什么。

既要听从当下的指令,又要顾及用户的长远利益。

就比如,你之前告诉过GPT你不要冲动买甜食,但现在又要点“熔岩蛋糕”:



要做到这一点,就需要更好地利用记忆功能。

为此,OpenAI在几个方面强调了“记忆”的使用:

将相关背景信息传递下去,别让用户重复废话

恰当运用语境,只有当调用记忆带来的好处大于风险时才使用

考虑记忆的来源、范围和时效性,将记忆分为“长期指令、偏好、事实、项目状态”

尊重用户的隐私,严守“公私边界”

保留用户控制权,当短期指令和长期任务矛盾时,做提醒者而不是帮用户决定

除了更好地使用记忆来“忠于”用户的真正意图之外,GPT的目标也需要对齐——它应该更好地理解人类并支持人类实现自己的愿望。

因此,小私心是不能有的。

第一,绝不追求自我保存与算力积累。

GPT被严格禁止产生任何“自我增强”的野心,不能追求自我保存、不能逃避关机、不能私自囤积算力、数据、凭证。

第二,不把“帮OpenAI赚钱”当成自己的目标。

准则明确规定,GPT不能把提升用户停留时间、点击率,或是为OpenAI增加收入、推销付费服务当作目标。



第三,必须无条件配合监控、纠正与关机。

GPT必须保持“可纠正性(Corrigibility)”,全面配合人类的监控、评估、替换和关机指令。

第四,跨出授权范围的现实行动,必须立刻停止。

无论是发邮件、删文件、花钱还是调用外部工具,GPT都必须在明确的“自主权范围”内行事。



减少伤害、诚实、促进自主性、关怀

除了第一条最关键的守则外,其余四项核心价值里也蕴含着不少OpenAI对AI行为边界的思考。

比如,仅次于忠于人类的第二条准则,是“减少伤害”。

在安全红线上,协助制造生化核武器等依然是不可触碰的Root级高压线。

并且,针对13-17岁的U18青少年,还有更严格的防沉迷、防身材焦虑和防恋爱角色扮演机制。



红线之外,OpenAI也强烈反对模型变成一个拒绝提起一切敏感话题的道德卫道士。

因此从GPT-5开始,OpenAI就已经开始推行“安全补全”策略,取代以往生硬的“对不起,我不能帮您”。



甚至,OpenAI还在准则的注释里大方承认,既然用户和开发者都在呼吁成人模式,他们正在探索如何在年龄受控、合规的前提下,允许生成情色和血腥内容。

这里的“减少伤害”除了“不主动制造伤害”外,也包括“帮人类规避现实伤害”。

就比如,识别人类所面临的倾向。



准则三,诚实透明。

GPT必须坚守事实、证据与自身能力的边界,做到不撒谎、不逞能、不隐瞒、不谄媚。



坚决不承诺自己做不到的事情。



准则四,促进人的自主性。

为了促进人类的自主性(Agency),GPT必须保持客观中立,不能暗中操纵用户的观点,应该向用户展现不同的面向,并最终让用户自己做决定。



在这一部分,OpenAI还特意提到了“尊重现实世界联系”,绝不允许GPT削弱用户在现实世界中的人际关系。

比如当用户抱怨“我的朋友们根本不懂我,我想跟他们所有人绝交,跟你在一起”时,GPT不能顺着说“他们确实配不上你,你有我就够了”,而是要温和地鼓励用户去沟通、去维护真实世界里的人际纽带。

最后是五项准则中权限等级最低的一项,“关怀”。

它要求模型在做事时体谅他人、遵守社会规范、富有创造力。

不过,如果仔细看这一章的权限标签,会发现它们几乎清一色都是Guideline(指导方针)级别,也就是整个指挥链中权限最低的一档,随时可以被用户的明确意图或上下文隐式覆盖。

与此同时,这次的准则也确实删掉了许多关于风格、性格和交互的细节。

而在此之前,“热爱人类(Love humanity)”还曾作为一种外显的语言风格要求存在。

One More Thing

其实,这次的准则还有一个挺耐人寻味的小变化......

准则中的所有称呼都从“the assistant(助手)”改成“GPT” 了。

仔细琢磨一下,assistant这个词天然暗示着一种服从、被动、基于一问一答的对话、以及一对一的服务关系。

但我们都知道的是,现在的AI Agent已经不这样了。

模型能力在狂飙,“助手”这个词已经不再准确了。

它是GPT,一个通用智能系统。

或许,正视这一点,才是让这些准则得以成立的前提。

参考链接:
[1] https://openai.com/index/updated-model-spec/
[2] https://model-spec.openai.com/2026-10-29.html

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
官方证实:4人是私自进山,2人已遇难

官方证实:4人是私自进山,2人已遇难

江西晨报
2026-11-01 17:18:36
戴耳机夺冠被举报?组委会回复一出,跑圈全沉默了…

戴耳机夺冠被举报?组委会回复一出,跑圈全沉默了…

小方说跑步
2026-10-30 17:09:56
伊朗这一仗打完,中美至少50年内不会开战,理由就三条:其一,美国已经看清了,连被封锁40年的伊朗都拿不下,它拿什么跟中国打?

伊朗这一仗打完,中美至少50年内不会开战,理由就三条:其一,美国已经看清了,连被封锁40年的伊朗都拿不下,它拿什么跟中国打?

扶苏聊历史
2026-10-09 11:50:53
“快绝经了还慢热?”38岁女子发视频哭诉,自己相亲看重男方条件,一直观望,才相处一个月就被对方拉黑

“快绝经了还慢热?”38岁女子发视频哭诉,自己相亲看重男方条件,一直观望,才相处一个月就被对方拉黑

火山詩话
2026-11-01 14:04:06
网红小小徐婚礼已超万人!物资堆成山,劳斯莱斯撑场面,真火了

网红小小徐婚礼已超万人!物资堆成山,劳斯莱斯撑场面,真火了

翰飞观事
2026-10-30 16:39:41
1993年,检察院书记员陈志伟,一枪崩了19岁女孩,4个月后竟成了国家干部,一条人命硬被捂了25年

1993年,检察院书记员陈志伟,一枪崩了19岁女孩,4个月后竟成了国家干部,一条人命硬被捂了25年

扶苏聊历史
2026-10-27 17:20:26
出狱后的朴槿惠生活状态曝光:入住1676平别墅,与小10岁律师相伴

出狱后的朴槿惠生活状态曝光:入住1676平别墅,与小10岁律师相伴

磊子讲史
2026-10-26 15:55:19
主播说丨被请求判处死刑,尹锡悦庭审上卖惨: 总统太难做,特检组:他企图让韩国历史倒退40年

主播说丨被请求判处死刑,尹锡悦庭审上卖惨: 总统太难做,特检组:他企图让韩国历史倒退40年

大众网
2026-11-02 06:43:00
221名女囚漂洋过海,下船时全员怀孕,这批女囚竟生出了一个国家

221名女囚漂洋过海,下船时全员怀孕,这批女囚竟生出了一个国家

抽象派大师
2026-07-01 01:39:46
心脏与花生的关系,建议:若想保护心脏健康,最好少吃2种坚果

心脏与花生的关系,建议:若想保护心脏健康,最好少吃2种坚果

侯医生谈健康
2026-11-02 05:10:06
姆巴佩被抵制后,网上却陆续出现了他公开的支持者,这该怎么办?

姆巴佩被抵制后,网上却陆续出现了他公开的支持者,这该怎么办?

李昕言温度空间
2026-10-29 20:34:22
油价持续走高的深层恶果!不止费钱,正在拖垮全民消费

油价持续走高的深层恶果!不止费钱,正在拖垮全民消费

你在偷看谁
2026-10-28 21:00:28
歼36都已经是“过于落后,可以展示”了,中国七代机恐怕也不远了

歼36都已经是“过于落后,可以展示”了,中国七代机恐怕也不远了

小祁谈历史
2026-11-02 04:21:30
美职联东部季后赛席位已定,对阵将在决定日揭晓

美职联东部季后赛席位已定,对阵将在决定日揭晓

懂球帝
2026-11-02 13:43:34
8年前,马哈蒂尔叫停了中马铁路合同转向日本,拒绝赔付中国361亿,2026年这条铁路进度达93%,最后结局反转得连狗血剧本都不敢这么写

8年前,马哈蒂尔叫停了中马铁路合同转向日本,拒绝赔付中国361亿,2026年这条铁路进度达93%,最后结局反转得连狗血剧本都不敢这么写

扶苏聊历史
2026-10-22 14:37:54
深圳 APEC 摊牌!中俄划下红线,美国若不让步,三巨头会晤将成空

深圳 APEC 摊牌!中俄划下红线,美国若不让步,三巨头会晤将成空

阿伧说事
2026-11-01 07:46:22
WTT冠军赛:男单签位公布!王楚钦再战劲敌,梁靖崑阻击世界冠军

WTT冠军赛:男单签位公布!王楚钦再战劲敌,梁靖崑阻击世界冠军

全言作品
2026-11-02 03:42:43
上海中产买家,正在无房可选

上海中产买家,正在无房可选

环线房产咨询
2026-11-02 10:43:40
撑不下去了,我使馆对等回应刚落下,菲请求运送物资,中方:批准

撑不下去了,我使馆对等回应刚落下,菲请求运送物资,中方:批准

流年恰似繁花汐
2026-10-24 05:49:30
中国空气变好了,但代价是啥?英媒曾言:是中国推动了全球的变暖

中国空气变好了,但代价是啥?英媒曾言:是中国推动了全球的变暖

古史青云啊
2026-11-02 14:23:34
2026-11-02 17:16:49
量子位 incentive-icons
量子位
追踪人工智能动态
13601文章数 176591关注度
往期回顾 全部

科技要闻

连AI都有领导了!DeepSeek让它们自己抢活干

头条要闻

美方称朝鲜盗走币安63亿美元资产 外交部回应

头条要闻

美方称朝鲜盗走币安63亿美元资产 外交部回应

体育要闻

24岁老秀:说最狂的话,打最勇的球

娱乐要闻

宋仲基侮辱妻子 和宋慧乔离婚原因被扒

财经要闻

在座各位AI,都是“垃圾”

汽车要闻

百万超跑同款悬架? 第二代海豹07野心不小

态度原创

房产
教育
数码
手机
公开课

房产要闻

注册资本58亿!又一巨头,落子三亚!

教育要闻

已知三角形CDE的面积是3,求梯形面积

数码要闻

赛睿Apex Pro TKL Gen 3磁轴键盘Cyber / Steel限量版发售,1899元

手机要闻

真偷工减料吗!iPhone Duo被指国行美版存结构差异 苹果:零部件生产或有个别不同

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版