机器之心报道
编辑:+0
OpenAI 是一家长期处于聚光灯下的公司,其中的明星人物我们都耳熟能详:Sam Altman、Ilya Sutskever、Mira Murati、Dario Amodei、John Schulman……
今天,Altman 则通过一篇博文特别介绍了两位居于幕后的核心研究员:Jakub Pachocki 和 Szymon Sidor,称他们在结合前沿研究与工程实践方面解决了诸多难题,对 OpenAI 的发展至关重要。
Altman 形容两人为「完美互补的传奇搭档」。Pachocki 作为首席科学家,负责制定公司宏观的研究路线图,而 Sidor 则负责将这些宏大的愿景付诸实践。
以下是 Altman 的博客原文(精简版):
近年来,AI 的飞速发展有目共睹,ChatGPT 的惊艳表现更是将这一切推向了新的高度。我们常常惊叹于技术的伟力,却忽略了其背后闪耀的人类智慧与不懈探索。今天,我想用一分钟的时间,向您讲述这个伟大故事中两位不可或缺的英雄。
在 OpenAI,有两位杰出的人才:Jakub Pachocki 和 Szymon Sidor。没有他们,就没有今天的 OpenAI。他们一次次将前沿研究与卓越工程完美结合,攻克了无数看似不可能的难题。
正是他们,在强化学习普遍不被看好的情况下,力排众议,坚持规模化探索其潜力,最终促成了 Dota 项目的辉煌成就。他们构建了坚实的基础设施,为众多科学突破铺平了道路;他们领导了 GPT-4 的预训练;他们与 Ilya 和 Lukasz 共同孕育了实现推理能力突破的早期思想;他们更是在探索全新范式上取得了卓越进展。
Jakub Pachocki,我们的首席科学家,曾以「不知疲倦」来形容 Szymon,这或许也是他们二人共同的写照。多年来,我亲眼见证了这对传奇搭档如何完美互补,解决了一个又一个难题。他们是 OpenAI 的基石,是推动 AI 边界的真正力量。虽然他们未曾站在聚光灯下,但他们的贡献值得被每一个人铭记。
左为 Jakub Pachocki,右为 Szymon Sidor。两人参加OpenAI 的播客节目 Before AGI 。
Jakub Pachocki
Jakub Pachocki 在青少年时期专注于竞争性编程,曾六次入围国际信息学奥林匹克竞赛(IOI)决赛,并在 2009 年获得银牌。2012 年,他同时获得了 Google Code Jam 冠军和国际大学生程序设计竞赛(ICPC)世界总决赛金牌。
据他本人所述,15 岁时读到 Paul Graham 的名作《黑客与画家》,深受启发,这让他不仅着迷于编程的技术挑战,更被其作为创造性工具的哲学所吸引。
Pachocki 的博士论文题为《Graphs and Beyond: Faster Algorithms for High Dimensional Convex Optimization》,专注于为大规模网络和高维数据设计高效算法,涉及谱图论和凸优化等领域。
尽管这些属于理论课题,但与 LLM 的工程实践紧密相关,因为现代神经网络的训练本质上是复杂的高维凸优化问题。他在博士期间积累的理论知识,为他理解和解决神经网络扩展过程中遇到的工程瓶颈提供了基础。
在 OpenAI 将「缩放定律」(即模型能力随计算、数据和参数规模的增长而涌现)确立为核心理念时,Pachocki 不仅是该理念的支持者,也具备了在数学层面指导其实施的能力。
他于 2017 年加入 OpenAI,在 OpenAI Five 项目中领导团队,使 AI 在电子竞技游戏《Dota 2》中击败了人类世界冠军。这一成果增强了公司内部对规模化 RL 潜力的信心。作为研究总监,他直接领导了 GPT-4 的开发与预训练工作。
Jakub Pachocki 还入选了今年的《时代》杂志百大 AI 人物。
Szymon Sidor
Szymon Sidor 与 Pachocki 毕业于同一所波兰精英高中,接受了早期计算机科学训练,随后在 MIT 获得电气工程与计算机科学硕士学位。
Sidor 2016 年的硕士论文《Reinforcement Learning Approach to Multi-Stage Reasoning in Natural Language Processing》,展现了惊人的前瞻性。
在当时,RL 和 NLP 还被视为两个相对独立的领域,而 Sidor 已经开始探索两者的交叉点,使用深度 Q 学习等技术让智能体理解并执行自然语言指令。
这项早期研究,完美契合了 OpenAI 后来的技术路线。无论是用于对齐 ChatGPT 的「基于人类反馈的强化学习」(RLHF),还是当前用于训练推理模型的复杂 RL 框架,都建立在 RL 与 NLP 深度融合的基础之上。
在 OpenAI,Sidor 的贡献涉及多个核心项目。在 OpenAI Five 中,他参与构建了大规模 RL 系统及基础设施。在机器人学领域,他参与的「学习灵巧的掌上操控」项目,实现了在模拟环境中训练、在真实机械手上「零样本」迁移的复杂操作。同时,他也对提升智能体探索效率与稳健性的 RL 核心算法做出了贡献。
随着公司战略重心转向大型语言模型,Sidor 也参与其中。他的名字出现在 GPT-4 技术报告中,并且是推理模型系列(如 o1、o3)的关键贡献者。
OpenAI「宫斗」的关键人物
2023 年 11 月 17 日,OpenAI 董事会突然宣布解雇 CEO Sam Altman,理由是其「在与董事会的沟通中未能始终保持坦诚」。
这一事件的背后,是公司内部早已存在的深刻分歧:一方是以 Altman 为代表,主张加速技术研发与商业化应用的「加速派」;另一方则是以时任首席科学家 Ilya Sutskever 为首,更强调 AI 安全与审慎发展的「安全派」。
在 Altman 被罢免后的短短几小时内,危机迅速升级。作为对董事会决定的直接回应,时任研究总监的 Jakub Pachocki 和高级研究员 Szymon Sidor,联合 AI 风险评估负责人 Aleksander Madry,毅然向公司提出辞职。
他们的行动是后续员工大规模抗议的导火索之一:超过 700 名员工签署联名信,要求原董事会辞职并迎回 Altman,否则将集体辞职。
巨大的内部压力最终促使董事会妥协。在公司高层安抚员工的内部备忘录中,明确提到目标是「带回 Sam、Greg、Jakub、Szymon、Aleksander 以及其他同事」,显示了他们在公司内的重要性。
为期五天的风波以 Altman 的戏剧性回归和董事会重组而告终。危机过后,OpenAI 的权力结构发生变化,Ilya Sutskever 在公司内部的影响力减弱,并于 2024 年 5 月正式离职。随后,Jakub Pachocki 被任命为 OpenAI 的新任首席科学家。
另一场「发布会」
有趣的是,讨论两位主角之外,Altman 的评论区全都是 KeepStandardVoice 和 keep4o 的标签。
KeepStandardVoice 源于 OpenAI 宣布将于 2025 年 9 月 9 日(也就是今天)正式退役 ChatGPT 的「标准语音模式」,包括 Cove、Juniper、Ember 和 Breeze 等经典语音选项。
这引发了大量用户不满,因为许多人认为标准语音更温暖、自然、更适合日常对话和情感连接,而新推出的「高级语音模式」虽然更先进,但缺乏那种亲切感,无法完全替代。
同时有用户表示,对许多残障人士来说,标准语音是唯一可用的选项,移除它只会制造数字无障碍危机而非进步。
同时,OpenAI 推出 GPT-5 模型后,计划逐步减少或移除 GPT-4o 的可用性(尽管承诺过会长期支持)。这让依赖 GPT-4o 的用户感到失望,遂发起 keep4o 运动。
用户呼吁 OpenAI 永久保留 GPT-4o 作为可选模型,而不是完全淘汰。他们强调,AI 不应只追求技术升级,而忽略了它带来的情感价值。
这两个话题在 Reddit、X 及 OpenAI 官方社区引发了广泛讨论,社交媒体上还出现了许多抗议海报。
对此你有什么看法呢?
上一篇:我国6.6内核商用操作系统发布