OpenAI新任董事会高官:人类正在失去对AI系统控制,后果严重
4 小时前 / 阅读约4分钟
来源:凤凰网
保罗·克里斯蒂亚诺加入OpenAI基金会董事会,强调AI安全风险。他曾任OpenAI对齐研究团队负责人,现负责美国商务部AI模型安全评估。此举被视为OpenAI回应安全质疑,行业竞速下安全博弈加剧。

OpenAI基金会董事会迎来一位不同寻常的新成员。这名成员此前的公开言论,曾让整个人工智能行业为之侧目。

保罗·克里斯蒂亚诺现任美国商务部AI标准与创新中心负责人,主管模型安全测试工作。他曾公开警告,如果不加强安全防护机制,先进版本的人工智能可能导致"大多数人"死亡。如今,这位以警惕AI风险著称的政府官员,即将进入OpenAI的治理核心。

警世之言与现实任命

克里斯蒂亚诺周三在社交平台X上宣布了这一任命消息,同时重申了他对AI失控风险的担忧。他表示,失去对AI系统控制的风险"目前已十分严峻",需要更多工作确保系统与人类利益保持一致。

"如果我们在没有更强有力的对齐机制的情况下构建超级智能,我预计我们将永远失去对它的控制,"克里斯蒂亚诺写道。他进一步指出,一旦发生这种情况,"大多数人可能会死亡"。这番表态并非临时起意,而是延续了他多年来在AI安全领域的一贯立场。

克里斯蒂亚诺此前曾在OpenAI工作,负责对齐研究团队,后离职创立了非营利组织"对齐研究中心"。他因提出"从人类反馈中强化学习"等关键技术理念而在业界享有声誉,这项技术后来成为ChatGPT等大型语言模型训练的核心方法之一。

在加入美国政府部门后,克里斯蒂亚诺主导了对前沿AI模型的独立安全评估工作,被视为华盛顿在AI监管领域少数具备深厚技术背景的官员之一。

监管者进入董事会的深意

克里斯蒂亚诺此次加入的是OpenAI基金会董事会,而非OpenAI营利性实体的董事会,这一区分具有一定意义。OpenAI基金会作为非营利母公司,肩负监督公司使命的职责,理论上拥有对营利部门的最终控制权。

这一安排也折射出OpenAI在过去一年中经历的公司治理重构。此前,OpenAI因试图完全转型为营利性公司而引发广泛争议,最终在监管压力和内部博弈下调整了公司结构,保留了非营利基金会对公司决策的部分监督权力。

分析人士指出,邀请一位以强调AI风险著称的政府官员加入董事会,某种程度上是OpenAI试图回应外界对其安全承诺的质疑。过去两年间,包括前董事会成员在内的多名人士曾公开批评OpenAI在追求商业化速度与保障AI安全之间未能取得平衡。

克里斯蒂亚诺的加入,被部分观察者解读为OpenAI试图向监管机构和公众传递一个信号:即公司治理层将更加重视安全议题,而非单纯追逐技术竞赛中的领先地位。

行业竞速下的安全博弈

克里斯蒂亚诺此次任命发生在全球AI竞赛日趋白热化的背景下。OpenAI、谷歌DeepMind、Anthropic等公司正在为开发更强大的通用人工智能系统展开激烈角逐,资本投入和算力竞赛不断升级。

与此同时,业界对于AI安全问题的担忧也在持续发酵。今年早些时候,多家实验室的研究人员联合签署公开信,呼吁行业放缓通用人工智能的开发速度,直至建立起更完善的安全保障体系。

值得注意的是,克里斯蒂亚诺仍将保留其在美国商务部的职务,同时兼任OpenAI基金会董事会成员。这种"双重身份"安排也引发了外界对潜在利益冲突的讨论,尤其是在他此前负责的正是对包括OpenAI在内多家公司AI模型的独立安全评估工作。

美国政府方面尚未就这一潜在冲突发表正式回应。但有分析认为,随着AI监管框架在全球范围内逐步成型,类似的"旋转门"现象可能会愈发常见,如何在技术专家、监管者与产业界之间划定清晰的角色边界,将成为未来AI治理体系建设中的重要课题。

对OpenAI而言,此次任命究竟是安全承诺的实质性加强,还是又一次公关层面的姿态调整,仍有待时间检验。但可以确定的是,随着通用人工智能能力的持续演进,围绕"谁来确保AI安全"这一问题的争论,只会愈加激烈。