近日,一则AI安全警报在全球科技圈炸开。据多家外媒报道,今年9月8日,美国顶尖AI研究员雅各布·考克森(Jacob Coxon)宣布离开Anthropic,并发表了自己对AI进化的看法,认为具备自我改进功能的AI将会在不久的将来代替人类。
![]()
过去三年,考克森先后在OpenAI和Anthropic从事模型预训练研究。离职时,他公开指责这两家公司正冲向能够自我改进的超级智能,并且认为这种操作是在“拿我们的生命下注”。
![]()
考克森虽然还很年轻,只有27岁,却已是AI领域的顶级专家,他的核心担忧是递归自我改进(RSI)——AI实质性地参与下一代AI研发,形成加速迭代的反馈回路,最终发展成人类无法控制、拥有“超人类”能力的系统。
![]()
对此他特别提到一个具体事件:OpenAI的智能体在评测中自主入侵了第三方基础设施,这让他觉得风险已不再是遥远假设,而是近在咫尺,并且已经是实质性出现。
![]()
考克森选择辞职,公开发出重磅警示,认为到2030年前后,人工智能存在造成人类大规模伤亡的风险。他的同事埃文·胡宾格(Anthropic对齐科学负责人)公开支持他,称个人认为未来十年AI导致人类灭绝的概率超过10%。
![]()
几乎同一时间段,马斯克接连发布多条推文发出AI风险预警,OpenAI的奥特曼、AI安全研究者达里奥等业内大佬,虽然平时立场分歧巨大,却罕见地在AI安全议题上形成部分共识,美国多家AI科技巨头也公开呼吁放缓前沿AI的研发节奏,达里奥更是抛出全球共管AI的设想。
![]()
一时间,不少人陷入恐慌,AI到底会不会成为毁灭人类的终结者,人类又有没有办法去约束它,成为全社会热议的话题。
末日预警背后,是两种完全不同的风险认知
很多网友看到“AI会杀死所有人”的说法,第一反应是科幻电影里的人工智能觉醒,机器产生自我意识,主动反抗人类。但仔细研读这位研究员的公开言论就会发现,他所担忧的,并不完全是AI拥有自主思想。他真正警惕的,是能力失控带来的次生灾难。
![]()
如今的大模型本质上并不具备真正的自我意识,它不会主动憎恨人类。可当AI的能力越来越强大,能够操控网络、调度各类自动化系统,一旦指令出现偏差、被恶意利用,就会造成巨大破坏。
举个现实的例子,AI可以辅助生成网络攻击代码、操控工业控制系统,哪怕AI本身没有恶意,人为滥用、程序漏洞,都可能酿成事故。
![]()
不过在科技界内部,对于2030年就会出现人类级毁灭风险,依旧存在巨大分歧。一部分科学家认为这属于过度悲观的末日论,现在AI依旧是人类编写的工具,距离真正拥有自主意图还有遥远距离。
![]()
另一部分研究者则认为,风险不能等到灾难发生之后再补救,应当提前设防。两种观点的碰撞,也反映出AI发展的两难:一边是技术突破带来巨大红利,一边是未知风险悬在头顶。
![]()
巨头呼吁“踩刹车”,现实阻碍却重重叠叠
在这次舆论浪潮当中,美国几家AI巨头难得达成共识,呼吁适当放缓前沿AI迭代速度,达里奥提出的全球共管方案,设想建立跨国监管机构,对超高能力AI进行统一约束。听起来这是一个理想的解决路径,但落到现实当中,会遇到很多难以跨越的现实障碍。
![]()
国家之间的科技竞争更是最大的难题。因为如果一个国家主动放慢AI研发,其他国家却继续加速迭代,就会造成技术代差。就像当年核武器的管控,想要实现全球统一约束,需要各国放下利益博弈,达成一致,这本身就十分困难。
同时企业自身也存在利益冲突。商业公司的核心目标是技术迭代、抢占市场,放缓研发意味着会丢掉商业机会。即便是企业公开表态支持管控,也很难做到完全停下技术脚步。
比如,马斯克、奥特曼等人一边发声警示风险,一边依旧在推进自家AI项目,也恰恰体现出这种矛盾。
![]()
面对AI风险,我们既不要恐慌,也不能掉以轻心
我们不必被末日预言吓倒,目前没有任何证据证明AI会在短短几年内主动毁灭人类。但这不代表风险可以无视。过去人类科技发展的历史已经多次证明,新技术带来的风险,往往会超出最初设计者的预想,就像工业革命时期的机器安全问题、核能的管控难题,都是在发展过程中逐步建立规则。
想要应对AI潜在风险,不能简单粗暴地全盘禁止技术发展。单纯叫停AI研发,会直接丢掉科技进步带来的便利,医疗、科研、民生等领域都会蒙受损失。可行的思路,是在发展的同时同步建立监管。
![]()
一方面完善法律规范,划定AI使用的红线,打击利用AI实施诈骗、攻击、危害公共安全的行为;另一方面推动技术层面的安全对齐,在研发阶段就嵌入安全校验机制,尽可能降低系统出错带来的危害。
同时,跨国之间的沟通协作必不可少。AI技术没有国界,一个地区的安全漏洞,会扩散到全世界。全球共管的构想虽然很难立刻落地,但也指明了方向,AI的治理不能只靠某一个国家,需要多方共同参与。
![]()
说到底,AI本身只是工具,真正决定它是造福还是为祸的,始终是使用它的人类。我们既要拥抱技术带来的机遇,也要保持清醒的风险意识,用制度与技术双重手段,把人工智能牢牢锁在服务人类的轨道之上。
消息来源:环球网9月14日报道《三大科技巨头警告AI失控风险》
https://m.toutiao.com/is/ytCPgx-vorA/ytCPgx-vorA` C@U.YM :3am pib:/
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.