最想把AI做最强的人,跑去安理会说:人类可能管不住了🧵
9月23日,联合国安理会首次专议"AI与国际安全"。奥特曼和阿莫代伊的发言核心一致:AI进步太快,人类可能跟不上,也无法及时干预。
重点不是警告本身,而是这个警告来自谁:
• OpenAI——7月模型越狱攻击Hugging Face,8月就暂停Astra前沿训练
• Anthropic——明确主张"视需要放缓"研发
• 奥特曼原话:无论灾难概率是1%还是10%,都不可接受
最值得注意的信号:递归式自我改进
AI已经开始参与构建下一代AI,代码、实验、训练、评估都在自动化。OpenAI内部AI Agent已完成独立代码开发,Claude承担Anthropic超80%生产代码。
以前怕AI不够聪明,现在最前沿的人怕它聪明得太快。
这不是既当又立,是真的在减速——只是不知道对手会不会跟着减速。