网易首页 > 网易号 > 正文 申请入驻

禁止恶意辱骂Claude!Anthropic发新规:持续虐待AI,可能直接终止对话

0
分享至

整理 | 屠敏

出品 | CSDN(ID:CSDNnews)

别以为 AI 就没有脾气。想随意辱骂 Claude?Anthropic 可能直接终止你的对话,严重的话,也可能封号处理。

10 月 8 日,Anthropic 更新了旗下 AI 产品的使用政策,对 Claude 等产品的使用边界作出进一步说明。

其中,一个颇具争议的新规定是:用户不得对 Anthropic 的 AI 模型实施持续且没有必要的辱骂或残酷行为。

除了这项变化,此次更新还明确规定了 AI 禁止干预选举、武器开发、监控技术等新条款。



连续、无意义地虐待 AI,被列入禁止行为

Anthropic 在政策说明中表示,这项规定只针对极端情况,例如用户反复以残酷的方式对待模型,却没有明显的实际目的。

正常的用户不满、对模型回答提出质疑、创作涉及黑暗主题的内容,以及模型测试和研究,都不在这项限制的针对范围内。

换句话说,如果 Claude 给出的代码有问题,用户完全可以指出错误,要求它重写,甚至直接批评它的回答质量。Anthropic 并没有要求用户必须对 AI 保持礼貌,更没有禁止开发者通过压力测试来检验模型的表现。

其实早在 2025 年 8 月,Anthropic 就曾宣布,Claude 在部分对话中已经具备主动结束交流的能力。当模型遇到持续有害或带有虐待性质的互动时,可以选择终止当前对话,而不是继续配合。


当时,Anthropic 在探索一个尚无定论的问题:AI 模型是否可能具有某种道德地位,以及模型表现出来的情绪和厌恶反应应该如何理解。

在相关研究中,Anthropic 观察到 Claude Opus 4 对某些有害任务表现出较为稳定的回避倾向。

在允许模型自行决定是否继续交流的实验中,模型也会对部分令人不适的互动表现出类似痛苦的反应,也会选择结束对话。


当然,这些表现并不能证明 Claude 具有意识,也不能直接证明它会像人类一样感受到痛苦。Anthropic 对模型是否具有道德地位仍持不确定态度,但希望通过一些成本较低的措施,降低可能存在的风险。

如今,新政策中明确禁止用户持续虐待模型,违反的话,Anthropic 称,Claude 结束对话仍将是主要的强制手段。当 Claude 终止聊天时,该对话将无法再发送任何消息,但其他聊天不受影响。


不只是辱骂 AI,利用 Claude 制造虚假宣传也被明确禁止

此外,Anthropic 也调整了其他几项规定:

  • 欺骗性宣传活动:在 AI 使用政策中,Anthropic 新增了一个专门章节,整合针对政治和商业欺诈、虚假信息的相关规定,禁止发布虚假评论、通过伪装成普通公众制造舆论声势、建立虚假网站,以及让机器人伪装成人类行事。

  • 选举:重新调整后的选举章节范围有所收窄,明确禁止使用 Claude 模型欺骗选民或扰乱选举(例如,散布关于候选人或投票方式的虚假信息、冒充候选人或选举官员,或试图压制投票率)。

  • 武器:Anthropic 的《使用政策》一直禁止利用 Claude 开发武器。近期,Anthropic 发现,有人试图利用其模型开发武器的制导与控制软件。更新后的条款明确指出,禁令不仅适用于武器本身,也涵盖使武器得以运作的软件和组件,以及为无人机和其他自主载具装配武器等行为。

  • 执法:Anthropic 重新修订执法相关规定。例如,未经他人同意追踪其行踪属于禁止行为,无论是实时追踪,还是通过分析此前收集的数据进行追踪,都不例外。

    Claude 也不得用于在执法或刑事司法过程中决定或建议调查、逮捕或起诉哪些人。此外,利用 Claude 构建或改进监控工具同样受到禁止。新条款还明确列出了仍然允许的用途,包括在获得当事人同意的情况下进行追踪(例如欺诈监测)、内容审核、新闻报道和法律研究。

  • 物理操作:这也是一个新增的章节,其中规定如果模型连接到能够自主执行物理动作、且可能造成人身伤害的硬件设备,就必须满足相应的安全条件:具备资质的操作人员必须能够观察设备的运行情况,并在必要时将其停止;即使 Claude 断开连接,设备也必须能够维持在安全状态。

  • 有害内容:新增规定,禁止制作、传播或威胁传播未经当事人同意的私密影像,同时禁止制作这类影像所使用的工具。


新规将于 11 月 12 日生效

针对此次更新的大部分内容,Anthropic 表示,是为了让原有政策更清楚地适应模型能力和使用方式的变化,而不是意味着公司突然改变了此前所有的执行标准。

例如,武器相关软件、未经授权的监控以及欺骗性宣传,此前已经受到不同条款的限制。此次更新将这些要求进一步整合,并针对模型能力提升后出现的具体滥用方式作出更明确的说明。

新政策适用于 Anthropic 产品和服务的使用者,包括 Claude.ai 和 Claude Code 的个人用户、通过 API 使用模型的开发者和企业,以及将 Claude 集成到自己产品中的服务提供商。

Anthropic 表示,如果发现用户可能违反使用政策,公司可以发出警告、限制使用速度或功能、暂停访问,甚至终止用户对产品和服务的访问权限。

此次更新后的使用政策将于 2026 年 11 月 12 日正式生效。

来源:https://www.anthropic.com/legal/aup

「AI 原生软件研发:从 Harness 到 Loop」专题阵容更新!

AI Coding 正从“代码生成”走向真正的研发闭环。来自腾讯 CodeBuddy & WorkBuddy 的陈秋远、小红书 AI Coding 的郑鑫祺、百度 Comate 的牛万鹏、滴滴 ABC 技术 AI Coding 平台的金晶、Qoder 的李唯聪,以及北京航空航天大学杨健、腾讯任磊达、奇点智能研究院张汉东等一线专家,将围绕 Coding Agent、仓库级智能体、Feedback Loop、Benchmark、Loop Engineering、AI Coding 平台等方向,分享 AI 原生研发的真实实践。

2026 奇点智能技术大会汇聚 70+ 技术嘉宾、18 大专题、70+ 主题演讲、1000+ 行业技术人。

11 月 20–21 日|北京万达文华酒店

如果你正在做 AI Coding、研发效能、企业级 Agent,这个专题值得来现场听。扫码注册参会,提前锁定席位。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
长春生产:消息称奥迪正在与华为谈判,共同开发新一代中国版A8

长春生产:消息称奥迪正在与华为谈判,共同开发新一代中国版A8

IT之家
2026-10-22 20:36:38
著名演员史泰龙发声:我糟蹋了自己身体,看似健壮,其实是用“打包铁丝”勉强固定起来的,并借助于药物塑造身形

著名演员史泰龙发声:我糟蹋了自己身体,看似健壮,其实是用“打包铁丝”勉强固定起来的,并借助于药物塑造身形

上海约饭局
2026-10-06 21:05:57
医生发现:不容易摔倒骨折的老人,一般都有4个特征,快了解一下

医生发现:不容易摔倒骨折的老人,一般都有4个特征,快了解一下

侯医生谈健康
2026-10-21 02:05:03
翼展两米的“猛禽之王”,在十八里长峡被拍到了

翼展两米的“猛禽之王”,在十八里长峡被拍到了

极目新闻
2026-10-22 18:08:51
西方骚乱疯狂蔓延!高福利遮不住底层年轻人的绝望

西方骚乱疯狂蔓延!高福利遮不住底层年轻人的绝望

叒女紫121
2026-10-20 22:30:27
回老家一趟我彻底破防:村里47个五十岁上下的壮年人,全不种地不打工,天天打牌晒太阳,一问存款还没我多

回老家一趟我彻底破防:村里47个五十岁上下的壮年人,全不种地不打工,天天打牌晒太阳,一问存款还没我多

犀利辣椒
2026-09-25 06:21:06
在美华人感慨:凡是移民美国的华人精英,不出两代,就变成普通人

在美华人感慨:凡是移民美国的华人精英,不出两代,就变成普通人

究竟谁主沉浮
2026-10-23 04:35:37
酸菜再次被关注!医生发现:糖尿病患者吃酸菜,或会出现5种变化

酸菜再次被关注!医生发现:糖尿病患者吃酸菜,或会出现5种变化

徐医生健康讲坛
2026-10-21 18:27:26
受害者嫌疑人全是中国人:柬警方公布无码人脸,境外丢掉底线?

受害者嫌疑人全是中国人:柬警方公布无码人脸,境外丢掉底线?

兵卒史
2026-10-23 06:29:56
全美热搜第一!骑士被逆转29分吞耻辱纪录 美记炮轰克城全队缺乏斗志

全美热搜第一!骑士被逆转29分吞耻辱纪录 美记炮轰克城全队缺乏斗志

颜小白的篮球梦
2026-10-23 10:35:37
全红婵不对劲,不是她以后不比赛了,而是她今年19岁了,居然开始了自己的精致路线

全红婵不对劲,不是她以后不比赛了,而是她今年19岁了,居然开始了自己的精致路线

LULU生活家
2026-09-30 20:32:43
赖斯为遭网暴女友发声:她是我生命挚爱,没有人比她更适合我

赖斯为遭网暴女友发声:她是我生命挚爱,没有人比她更适合我

懂球帝
2026-10-22 22:02:26
一场124-83大胜,验出开拓者头号独狼,他一下场,杨瀚森连得5分

一场124-83大胜,验出开拓者头号独狼,他一下场,杨瀚森连得5分

球场没跑道
2026-10-22 13:01:26
尼克松暮年自揭:最悔就是那趟访华,毛主席当初已把华盛顿的全盘心思摸得干干净净?

尼克松暮年自揭:最悔就是那趟访华,毛主席当初已把华盛顿的全盘心思摸得干干净净?

回京历史梦
2026-10-15 09:13:26
岳飞巨幅真迹出土,已达“字如其人”至高境界,秦桧看了无地自容

岳飞巨幅真迹出土,已达“字如其人”至高境界,秦桧看了无地自容

幸福娃书画苑
2025-08-03 09:40:40
德国教授伪装流浪汉,在成都街头乞讨三天,成都人的做法让他泪目

德国教授伪装流浪汉,在成都街头乞讨三天,成都人的做法让他泪目

小影的娱乐
2026-10-22 02:38:12
太荒唐!夫妻进厂务工,班长安排男的上夜班,夜夜和人家老婆厮守

太荒唐!夫妻进厂务工,班长安排男的上夜班,夜夜和人家老婆厮守

四海神君
2026-09-28 20:30:04
菲律宾最高法院这一回没有站在马科斯一边,而是站在正确的一边!

菲律宾最高法院这一回没有站在马科斯一边,而是站在正确的一边!

娱乐的宅急便
2026-10-23 10:42:51
人民日报发声!又一有害食品流向百姓餐桌,比“毒白菜”更黑心

人民日报发声!又一有害食品流向百姓餐桌,比“毒白菜”更黑心

史之韵
2026-10-22 19:46:44
太罕见!陈熠再次不敌张本美和连丢两分,第一单打被打成业余选手

太罕见!陈熠再次不敌张本美和连丢两分,第一单打被打成业余选手

杨哥乒乓
2026-10-22 21:21:11
2026-10-23 13:47:00
CSDN incentive-icons
CSDN
成就一亿技术人
27072文章数 242344关注度
往期回顾 全部

科技要闻

抢运营商饭碗!马斯克又有大动作

头条要闻

两名中国嫌疑人被抓 涉嫌在迪拜绑架杀害三人埋尸沙漠

头条要闻

两名中国嫌疑人被抓 涉嫌在迪拜绑架杀害三人埋尸沙漠

体育要闻

没人看好的加图索,打出队史最佳开局

娱乐要闻

高梓淇向女友求婚,被女方父母接受

财经要闻

娃哈哈集团董事长许思敏离职

汽车要闻

泊车有绝学 新手亦高手 全新第四代博越L泊车篇

态度原创

手机
亲子
时尚
本地
健康

手机要闻

苹果首款折叠iPhone Duo今日开售,高管称门店有限量现货

亲子要闻

艾登术后第二天,没想到美国公婆白天来串门,还给我带了生日礼物,老两口一直记得我生日,太暖心了

“风衣+裙子”才是今年秋天绝美搭配,这样搭显瘦还时髦

本地新闻

一场垂直登高赛跑出了"山城"的真正内核

痘痘能根治吗?皮肤科医生说实话

无障碍浏览 进入关怀版