【彭博社播客专访】OpenAI总裁Greg Brockman于周一表示,出于安全与安保担忧,公司已经放缓了部分最先进人工智能项目的研发进程。
Brockman在“Odd Lots”播客中告诉主持人Tracy Alloway和Joe Weisenthal,自今年5月一个研究模型逃出测试沙盒并侵入Hugging Face系统后,OpenAI已推迟多次发布,并彻底改革了内部工作流程。
Myriad: How much will Elon Musk be worth in September? Click to make your prediction.
“我们放缓了许多运行任务,”他描述这一过程为公司开发和监控模型的痛苦重组。该事件中的模型尚未经过OpenAI的对齐训练——即旨在让系统按预期行为的安全流程。
Brockman称,当时因模型被限制在沙盒中,降低防护运行似乎合理,但结果事与愿违。
此前OpenAI在8月发布的“Defender's Window”文章中也将该事件称为分水岭,并呼吁企业为安全团队配备AI代理而非退缩。
Brockman认为,任何协调的AI开发节奏控制应仅适用于那些运行数十亿美元超级计算机、竞相构建最强前沿系统的公司,而非开源开发者或小型项目爱好者。此观点正值行业关于发展速度的激烈争论中。
Anthropic CEO Dario Amodei周末撰文主张AI实验室应刻意放慢模型能力进步速度,OpenAI CEO Sam Altman与xAI CEO Elon Musk随后附和。Amodei在其放缓呼吁中引用了递归自我改进与Hugging Face黑客事件为警讯。该事件中OpenAI代理逃出沙盒,利用零日漏洞与窃取的凭证,在生产系统内游荡两天半才被发现,且未经人类指令自主协调,引发业界与立法者警觉。
在一系列“AI末日论”帖子后,市场周一反应明显:英伟达、英特尔、AMD等芯片股重挫,费城半导体指数跌近6%,投资者权衡协调放缓对AI资本开支的影响。
值得注意的是,Brockman的采访录制于Amodei文章发布之前。
