前途科技前途科技
  • 服务
  • 关于
  • AI
    • AI 大模型
    • 具身智能
    • 算力芯片
  • 科技
    • 智能终端
    • 软件·互联网
    • 汽车·出行
    • 科学前沿
  • 资源中心
    • 深度研究
      • AI 前沿
      • 教程
      • AI 知识库
      • 案例研究
    • 行业报告
      • 白皮书
      • 行业报告
      • 研究报告
      • 技术分享
      • 专题报告
    • 精选案例
      • 金融行业
      • 医疗行业
      • 教育行业
      • 零售行业
      • 制造行业
  • 服务
  • 关于
联系我们
技术/09.18 · 00:00/5 MIN/作者:苏晚/1 阅读

AI末日究竟会是什么样:从一封辞职信到三类现实场景

Anthropic研究员Jacob Coxon的辞职信引爆AI安全争论后,Wired播客梳理了专家最担忧的三类末日场景——供水系统被黑客攻击、生物武器与自主机器人,也回顾了发出末日警告的理性主义社群的历史。

一封辞职信引发的连锁反应

2026年9月8日,研究员 Jacob Coxon 从 Anthropic 离职。他此前三年分别在 OpenAI 和 Anthropic 做预训练研究,属于让大模型变强的核心岗位。他在辞职信里写道:"建造 AI 的这些人真心相信,它可能在这个十年结束前杀死我们所有人。这不是营销噱头。"他放弃两个月后才归属的股权,选择离开。这篇帖子一天内被浏览超过一亿次。

Anthropic 内部没有人出面否认这封信。负责对齐科学的 Evan Hubinger 几小时内发帖称 Coxon 说得没错,他自己给出的十年内 AI 导致人类灭绝的概率也在十分之一以上。逾二十四名国会议员表示需要采取行动,但没有说明是什么行动。同时在建设自己前沿实验室的埃隆·马斯克称整件事是一场"心理操作"。

Wired 播客里的三类末日场景

在 Wired 播客 Uncanny Valley 中,主持人 Brian Barrett、Zoë Schiffer 和 Leah Feiger 讨论了专家最担心的三类现实场景:供水系统被黑客攻击、生物武器,以及自主机器人。

同一期节目提到,Salesforce 年度大会上,OpenAI 的 Sam Altman、Anthropic 的 Dario Amodei 与英伟达的 Jensen Huang 同台谈及 AI 安全,Altman 说世界害怕这件事是有道理的,行业面临失控事故和权力过度集中两大挑战。主持人意见不一:Barrett 认为公司说"我们在造核武器级别的东西"更像营销,但研究员辞职说"我造的东西会毁灭世界"则不同;Feiger 认为 Altman 的财务前途系于此事,很难不把他的表态也看作营销。节目还提到,这场争论已成跨党派议题——伯尼·桑德斯和史蒂夫·班农本周同台谈及此事。

发出警告的是什么人

这些末日警告主要来自一个已有约二十五年历史的互联网亚文化——理性主义社群,其成员自认为"比其他人想得更清楚"。这个圈子在硅谷之外并不知名,但在科技行业内部影响巨大,其写作者能左右业内声誉,成员遍布各大实验室、安全研究机构和相关慈善组织。

2025年12月,近五百人聚集在伯克利一间音乐厅,参加一场关于人类可能终结的仪式。组织者 Raymond Arnold 自2011年起组织这个社群,如今协助运营 LessWrong 论坛和伯克利会议场地 Lighthaven,自称"村里的牧师"。他在2025年估计 AI 引发灾难的概率超过五成,并在活动最暗的时刻说:"我不觉得我们能撑过去。"

接下来看什么

国会议员表态"需要采取行动",但源文本未提到具体立法计划或时间表。Wired 节目提到一篇相关报道探讨"AI 行业整体放缓是否合法"这一未决问题,监管路径仍不清晰。Altman、Amodei 与 Huang 的表态能否转化为具体政策,目前报道均未给出答案。

标签:AnthropicJacob CoxonEvan HubingerLessWrong理性主义社群Sam AltmanDario Amodei
苏晚
苏晚Su Wan

前途科技 · 前沿主笔

关注 AI 与前沿科技的观察者,前途科技前沿内容主笔。

查看全部文章

想了解 AI 如何助力您的企业?

免费获取企业 AI 成熟度诊断报告,发现转型机会

置顶文章

LoRA 让异步 RL 跨机只传几 MB:一个桶加一个代理,再靠三处设置提速 3.9 倍
置顶

LoRA 让异步 RL 跨机只传几 MB:一个桶加一个代理,再靠三处设置提速 3.9 倍

//

24小时热榜

OpenAI发布Astra for Law:面向法律行业的GPT-6模型
TOP1

OpenAI发布Astra for Law:面向法律行业的GPT-6模型

英王查尔斯召集AI巨头闭门会谈
前途科技前途科技
服务关于快讯技术商业报告
前途科技微信公众号

微信公众号

扫码关注

Copyright © 2026 AccessPath.com, 前途国际科技咨询(北京)有限公司,版权所有。|京ICP备17045010号-1|京公网安备 11010502033860号|隐私政策|服务条款
TOP2

英王查尔斯召集AI巨头闭门会谈

3

模式的终局:算法如何驯化了我们的创作

2小时前
模式的终局:算法如何驯化了我们的创作
4

Uber用"错误归属"机制遏制重试风暴,单次事件挡下950万请求

10小时前
Uber用"错误归属"机制遏制重试风暴,单次事件挡下950万请求
5

华为将发布昇腾960芯片,对标英伟达加速算力破局

22小时前
华为将发布昇腾960芯片,对标英伟达加速算力破局
6

Gemini对决GPT-6:差价超90%,开发者该选谁?

2小时前
Gemini对决GPT-6:差价超90%,开发者该选谁?
7

Anthropic发布生命科学计划 解锁生物研发AI限制

2小时前
Anthropic发布生命科学计划 解锁生物研发AI限制
8

AI末日究竟会是什么样:从一封辞职信到三类现实场景

10小时前
AI末日究竟会是什么样:从一封辞职信到三类现实场景
热门标签
大模型AgentRAG微调私有化部署Prompt EngineeringChatGPTClaudeDeepSeek智能客服知识管理内容生成代码辅助数据分析金融零售制造医疗教育AI 战略数字化转型ROI 分析OpenAIAnthropicGoogle

关注公众号

前途科技微信公众号

扫码关注,获取最新 AI 资讯

免费获取 AI 落地指南

3 步完成企业诊断,获取专属转型建议

已有 200+ 企业完成诊断