Anthropic 联合创始人警告称,AI 杀手开关可能已经过时
Jacob Coxon 于 2026 年 9 月 9 日从 Anthropic 辞职,四天后出现在 NBC News 节目中,警告称内置在先进 AI 系统中的终止开关可能已经过时。他特别担心,终止开关可能无法应对未来以分布式、类似蜂群的架构运行的自主系统,而这些系统可能绕过集中式关停命令。该警告出现之际,监管审查不断升级,其中包括商务部于 2026 年 6 月下令暂停 Anthropic 两个先进模型的海外访问权限,以及国会于 2026 年 7 月提出的两党共同支持的 AI Kill Switch Act。 Anthropic 开发者发出灭绝风险警告 Anthropic 的对齐负责人 Evan Hubinger 公开估计,未来十年内 AI 导致人类灭绝的概率超过 10%。Anthropic CEO Dario Amodei 于 2026 年 9 月 12 日发表文章,支持放缓 AI 能力发展,并呼吁对前沿系统进行独立安全评估。Coxon 在《Meet the Press》节目中的核心论点涉及集中式控制的实际局限性:当前 AI 模型由中心化主机托管,因此关停较为简单,但下一代自主代理可能
Oliver Grant·09-14 18:45
