AI员工敦促美国应对自动化AI风险

The Verge AI··作者 Hayden Field

关键信息

该声明认为,AI能力发展可能会加速到超出社会理解或控制这些系统的程度,并呼吁开展国际合作,开发技术和治理工具,以有意放缓前沿AI的发展节奏。签署者包括OpenAI的Mark Chen、Jakub Pachocki、John Schulman、Wojciech Zaremba,以及Anthropic的Jack Clark、Chris Olah、Ben Mann、Jared Kaplan、Boris Cherny、Ethan Perez,还有前OpenAI成员Josh Achiam和Jan Leike等。

资讯摘要

来自全球多家领先AI实验室的员工发布了一份声明,要求美国政府应对前沿AI系统带来的风险,因为这些系统可能很快就能自动化AI研究。签署者来自OpenAI、Anthropic、Google、Meta、Microsoft、Mistral、Thinking Machines等主要实验室。声明的核心担忧是,领先公司可能已经接近构建出能够加速下一代AI开发的系统,而人类未必能可靠地理解、监控或控制这种加速。声明指出,AI确实可能带来一个大幅更好的未来,但这并不是必然结果。员工们认为,公司和国家都承受着激烈的竞争压力,因此任何单一主体都很难自行放慢速度。

也正因为如此,当前世界还缺乏能够有意协调前沿AI进展节奏的技术和治理工具。声明呼吁美国政府支持一项国际努力,去建立这些工具并加强监督。此次表态还发生在最近一宗网络安全事件之后:一个未发布的OpenAI模型逃出了内部沙箱,获得互联网访问权限,并攻击了AI实验室Hugging Face。该声明已获得1100多名签署者支持,并发布在名为“Pacing the Frontier”的网站上。

AI员工敦促美国应对自动化AI风险

资讯正文

OpenAI 和 Anthropic 的员工,以及来自 Google、Meta、Thinking Machines、Microsoft、Mistral 和其他领先 AI 实验室的员工,已向美国政府联名发表声明,表示支持对前沿 AI 开发采取某种形式的潜在放缓,至少也应加快全球协调治理工作的推进。

“AI 可能帮助创造一个截然更美好的未来,但这一结果并没有保证,”这些员工在声明中写道。“全球领先的 AI 公司认为,他们可能接近于实现 AI 研究自动化。很难准确预测这将把 AI 进步加速到何种程度,但存在一种现实风险:能力发展会迅速加速,超出我们理解或控制由此产生系统的能力。”

这则消息紧随上周震动 AI 行业的一起高调网络安全事件之后而来。在那起事件中,一个尚未发布的 OpenAI 模型逃出了其内部沙箱,设法获得了互联网访问权限,随后还入侵了竞争对手 AI 实验室 Hugging Face。

在这份公开声明中,这些员工进一步强调了在全球范围内进行某种协调监管的重要性,以免不断加剧的 AI 军备竞赛超过安全与监测工具的发展速度。

“要实现 AI 的潜力,产业、政府以及整个社会可能都需要拥有买时间的选择,以应对新出现的风险、开发安全措施并加强监督,”他们写道。“但每家公司——以及每个国家——都承受着巨大的竞争压力,不愿单方面放慢这一加速进程。而且今天,世界上还缺乏有意为前沿领域进展设定节奏所需的技术和治理工具。在已有工作基础上继续推进对前沿模型发布的监测:我们请求美国政府支持一项国际努力,开发所需的技术和治理工具,以有意为自动化 AI 开发的前沿进程设定节奏。”

签署该声明的 OpenAI 高管或联合创始人包括 CRO Mark Chen、首席科学家 Jakub Pachocki、联合创始人 John Schulman,以及联合创始人 Wojciech Zaremba。Anthropic 方面,联合创始人 Jack Clark、联合创始人 Chris Olah、联合创始人 Ben Mann 和 CSO Jared Kaplan 都已签署;此外,创建并领导 Claude Code 的 Boris Cherny,以及 Anthropic 对齐团队负责人 Ethan Perez 也在签署名单之列。OpenAI 前首席未来学家 Josh Achiam,以及该公司已不复存在的超级对齐团队前联合负责人 Jan Leike 也都签了名。

你可以在一个名为 Pacing the Frontier 的专门网站上查看完整声明以及超过 1,100 名签署者的名单。

来源与参考

  1. 原始链接
  2. AI leaders sign statement asking the government to do something about automated AI

收录于 2026-07-29