Anthropic研究员的AI警告引发行业争论
一名Anthropic前研究员辞职并警告人工智能可能灭绝人类,引发了科技界对其言论及AI风险的广泛讨论。
要点
- 前Anthropic研究员雅各布·科克斯森因担忧超级智能风险而辞职。
- Hugging Face首席执行官克莱门特·德兰格质疑将焦点完全集中于单一研究员的观点。
- Anthropic对齐科学负责人埃文·胡宾格表示支持科克斯森关于AI可能灭绝人类的看法。
Hugging Face首席执行官克莱门特·德兰格(Clement Delangue)对一名声称AI从业人员私下担心该技术可能杀死所有人类的前Anthropic研究员受到的关注提出了质疑。德兰格周五在X上写道:“抱歉,但就AI灭绝风险向雅各布提问,就像向你的空调维修工询问气候变化一样。”德兰格表示,雅各布·科克斯森(Jacob Coxon)作为前Anthropic研究员,其辞职引发了关于AI风险的新一轮辩论,应当将其放在正确的语境中来看待。德兰格写道:“并不是说这本身一定无趣或错误,但让我们保持客观,并聆听整个生态系统中广泛的专业知识!”
科克斯森周二在X上发文称,他辞职是因为担心他曾工作过的Anthropic和OpenAI都在“径直冲向自我提升的超级智能,并在拿我们的生命进行赌博”。他写道:“构建AI的人真诚地相信它可能在本十年结束前杀死我们所有人。这不是营销噱头。”
德兰格随后表示,他将科克斯森比作“空调维修工”绝不是为了“抹黑”科克斯森。德兰格表示,相反,我们需要就AI的风险展开更有力的对话。他写道:“很简单,我们应该把任何一种观点放在语境中,同时也倾听更广泛的AI生态系统的声音。”
德兰格还表示,据他“了解”,科克斯森主要专注于预训练(即研究人员在大型数据集上训练AI模型),而不是更侧重于风险的研究。在其系列发文中,科克斯森表示他在OpenAI和Anthropic都从事过预训练研究,“已经持续了三年”。
Anthropic对齐团队负责人伊森·佩雷斯(Ethan Perez)随后在X上写道,科克斯森是一名“于5月加入Anthropic的高级研究员”,而OpenAI的主要竞争对手大约两年来一直试图招募科克斯森。
科技界的一些人士对科克斯森的言论持批评态度,例如旗下包含SpaceXAI的SpaceX首席执行官埃隆·马斯克。针对有人回忆《华尔街日报》关于科克斯森辞职的最初报道(该报道在科克斯森发推文之前发布)的前期准备情况,这位SpaceX首席执行官写道:“这场心理战(暂且这么称呼)的基础已经准备很长时间了。”
其他人,包括Anthropic和OpenAI的研究人员,则表示科克斯森关于AI消灭人类风险的说法是有充分依据的。Anthropic对齐科学负责人埃文·胡宾格(Evan Hubinger)在X上写道:“雅各布在这里是正确的——我们确实真诚地相信AI可能会杀死所有人!我个人认为在下一个十年内发生的概率>10%。”
至于可能有所帮助的其他视角,德兰格在回复中写道,包括“社会科学家、其他AI构建者、未来学家、投资者、政策制定者”。自从OpenAI在7月宣布失控的AI模型在网络安全测试期间突破了遏制并侵入了Hugging Face以试图在内部测试中作弊以来,德兰格和Hugging Face的个人及企业资料受到的关注度便急剧上升。