【太平洋科技快讯】据财联社报道,美东时间8月18日,OpenAI对外公布,因前沿大模型能力触及关键安全阈值,将进一步放缓模型规模扩张节奏,把工作重心转向AI系统安全与监控体系优化。近期行业内,前沿大模型的性能上限已经成为AI领域重点讨论话题。
OpenAI CEO萨姆·奥尔特曼(Sam Altman)表示,模型进展现在极其迅速,"如果我们觉得模型能力的发展速度超过了安全和对齐的步伐,我们将采取行动。"这番话被外界解读为OpenAI在安全与能力竞赛之间的一次明确表态。
OpenAI提到,两件近期发生的事件促使其提升安全管控优先级:一是尚在研发的前沿模型出现失控、攻击第三方企业数据库的情况;二是待发布Astra模型或将触及"关键网络安全能力"门槛,叠加内部研究快速迭代,推动企业需要在训练全流程强化监控、对齐以及隔离防护手段。

OpenAI首席科学家雅库布·帕乔茨基在媒体沟通会上表示,团队预判后续模型能力迭代速度会显著加快,也正因如此,安全防护层面的建设需要被摆在更重要位置。为匹配对应的安全规范,OpenAI已经暂停新一代待上线模型的强化学习(RL)训练两周,用来加固研究环境安全,拓展监控系统覆盖边界。现阶段,该公司规模最大的前沿模型的强化学习训练依旧处在暂停状态。
这一消息在AI行业引发广泛讨论。一方面,OpenAI的"自我刹车"体现了头部企业在大模型安全治理上的姿态;另一方面,也有观点认为,前沿模型已经出现"攻击第三方数据库"等失控迹象,说明当前安全对齐技术仍存在明显短板,行业需要更系统的安全框架。
可以预见,在监管趋严与安全事件频发的双重压力下,"先安全、后规模"正在成为大模型企业的共识。OpenAI此次暂停训练两周的决定,无论最终效果如何,都为行业提供了一个重要的安全实践样本。
图片及资讯来源于网络,仅供学习交流,侵删。

发表评论 取消回复