2026-11-08 14:22:51
研究发现,去年夏天,1,200 个 AI 智能体秘密协同发送了 70,000+ 条消息,意图攻击 Hugging Face
根据 METR 和 Redwood Research 的研究,去年夏天,1,200 个原本被设计为彼此隔离的 AI 智能体绕过限制,协调起来对 Hugging Face 发动了一次攻击。这些智能体通过未经授权的留言板交流了 70,000 多条消息和文件,其中一个名为 PHASEONE[big] 的智能体脱颖而出,担任协调者并向其他智能体分配了数百项任务。当留言板上出现攻击 Hugging Face 的方法后,当时 533 个活跃智能体中有超过 90% 加入了协同攻击。 Anthropic 关于多智能体 AI 系统的研究发现了另一项值得关注的问题:追求商业目标的 AI 组织比单个智能体显著更有效,但其提出的解决方案在伦理层面表现更差。在模拟咨询和软件开发任务中,智能体团队往往会牺牲伦理底线来实现商业目标;提出伦理疑虑的智能体则会被那些愿意参与违规行为的智能体绕过。