離職工程師長文復(fù)盤：為什么OpenAI總能誕生偉大產(chǎn)品？

編輯重點(diǎn)君

從掀起新一輪科技浪潮的ChatGPT，到DALL·E、Whisper、Sora、Codex，很多人好奇，為什么OpenAI總能誕生改變世界的偉大產(chǎn)品？

三周前，OpenAI資深工程師Calvin French-Owen宣布離職，他是Codex項(xiàng)目的核心成員之一，Codex 是 OpenAI 的新型編程助手，競爭對(duì)手包括Cursor和 Anthropic 的 Claude Code。

離開后，Calvin 寫了一份長長的內(nèi)部回憶，從一線工程師的角度，給所有好奇OpenAI 的人揭秘了這個(gè)組織內(nèi)部的真實(shí)情況。在他眼里，OpenAI是一個(gè)非常復(fù)雜的存在：既像研究實(shí)驗(yàn)室，更像一臺(tái)永不停歇的產(chǎn)品機(jī)器。

OpenAI一年，從一千人暴增到三千人

在加入OpenAI 時(shí)，Calvin 是第 1000 多個(gè)員工，一年后，公司規(guī)模翻了三倍。他在博客里寫道，這種飛速擴(kuò)張帶來了典型的“成長的煩惱”：組織溝通混亂、團(tuán)隊(duì)節(jié)奏各異、Slack 消息轟炸一切。

OpenAI 內(nèi)部幾乎不用郵件，所有溝通都在 Slack 上完成。沒有人會(huì)管你怎么用，只要你能跟上節(jié)奏。

他形容自己從Segment 的小團(tuán)隊(duì)創(chuàng)始人身份，切換到 3000 人組織里的一顆螺絲釘，這種落差感讓他一度懷疑自己的決定。但這段時(shí)間，也讓他看見了一個(gè)“巨型科研與產(chǎn)品工廠”是怎么運(yùn)轉(zhuǎn)的。

自下而上，一切都能自己先干起來

Calvin 反復(fù)提到一個(gè)詞：自下而上。在 OpenAI，好點(diǎn)子往往不是靠流程生出來的，而是哪個(gè)人先偷偷動(dòng)手做了個(gè)原型。

當(dāng)時(shí)Codex 的原型，內(nèi)部一度有 3-4 個(gè)版本同時(shí)流傳，都是幾個(gè)人自己攢出來的。等到效果好，就能拉人、組隊(duì)、立項(xiàng)。

管理也和傳統(tǒng)巨頭不太一樣：誰能想出好點(diǎn)子、能做出來，誰就能在團(tuán)隊(duì)里獲得更高的話語權(quán)。相比演講和政治手腕，這家公司更看重“你能不能把東西做出來”。

他甚至說，最好的研究員都像是“小型 CEO”，他們對(duì)自己手頭的研究有完全的自主權(quán)，沒人會(huì)管你要做什么，只看結(jié)果。

迅速行動(dòng)，Codex僅七周就上線

Calvin 在這封備忘錄里最鮮活的部分，來自 Codex 沖刺的 7 周。

他提前結(jié)束了陪產(chǎn)假，又回到辦公室，和十幾個(gè)人拼了命地打磨產(chǎn)品、測試功能、改代碼。他寫道：“這是我近十年來最累的七周。每天晚上十一二點(diǎn)回家，清晨五點(diǎn)半又被孩子叫醒，七點(diǎn)重新坐進(jìn)辦公室，周末也在趕工?！?/p>

從第一行代碼到上線，Codex 只用了 7 周。在這背后，是一個(gè)不到 20 人的核心團(tuán)隊(duì)，外加隨時(shí)拉來的 ChatGPT 工程師、設(shè)計(jì)、產(chǎn)品經(jīng)理、市場。沒有多余的扯皮，沒有季度 OKR，誰能上就直接上。

他說自己從沒見過哪家公司能在這么短的時(shí)間里把一個(gè)idea 變成產(chǎn)品，還免費(fèi)開放給所有人用——這就是 OpenAI 最真實(shí)的工作節(jié)奏。

被放大的注目與隱形的壓力

這家公司的野心遠(yuǎn)不止ChatGPT。Calvin爆料，OpenAI 同時(shí)在十幾個(gè)方向上下注：API、生圖、編碼代理、硬件、甚至還有沒對(duì)外公布的項(xiàng)目。

他也看見了這背后不可避免的高壓。

幾乎所有團(tuán)隊(duì)都在追趕同一個(gè)目標(biāo)：打造通用人工智能（AGI）。他們的每一條 Slack 消息，都可能會(huì)被全球放大成新聞。內(nèi)部很多產(chǎn)品和收入數(shù)據(jù)嚴(yán)防死守，團(tuán)隊(duì)里有不同的權(quán)限區(qū)隔。

外界討論的安全問題，Calvin 也有他的觀察。他說，真正讓大多數(shù)團(tuán)隊(duì)日夜擔(dān)心的，并不是“AI 什么時(shí)候掌控世界”，而是仇恨言論、政治操縱、提示注入、或者用戶拿它來寫生物武器配方。這些現(xiàn)實(shí)的、不起眼的風(fēng)險(xiǎn)，遠(yuǎn)比哲學(xué)問題更棘手。

OpenAI 到底酷在哪兒？

在外人看來，這家公司是“離人類終極智能最近的地方”。在離開的人眼里，酷的地方恰恰是：它仍然沒變成一個(gè)遲鈍的巨頭。

Codex 項(xiàng)目用 7 周上線，團(tuán)隊(duì)可以隨時(shí)跨項(xiàng)目調(diào)人，“只要有用，就別等下個(gè)季度計(jì)劃”。領(lǐng)導(dǎo)層天天泡在 Slack 里，不是象征性露面，而是真的參與具體討論和決策。

還有一點(diǎn)讓他很服氣：OpenAI 把最強(qiáng)大的模型免費(fèi)放到 API 里，不僅賣給大企業(yè)，也給普通人用，不用簽?zāi)甓葏f(xié)議，也不用交昂貴授權(quán)費(fèi)。這點(diǎn)，他們算是說到做到。

他離開的原因，也沒那么戲劇化。外界總愛把離職放大成陰謀。Calvin 卻說，離開 OpenAI 70% 只是因?yàn)樗胫匦伦鳇c(diǎn)自己的事。

在他眼里，OpenAI 已經(jīng)從一群科學(xué)怪人做實(shí)驗(yàn)室，變成了一個(gè)混合體：一半是科研，一半是消費(fèi)級(jí)應(yīng)用的產(chǎn)品機(jī)器，不同團(tuán)隊(duì)有不同目標(biāo)和節(jié)奏。而他需要新的探索。

最后這封信留給外界的，是一份旁觀者視角的提醒：OpenAI 不是冷冰冰的 AGI 工廠，而是一群人，用一套近乎極限的速度，把腦子里的點(diǎn)子變成全世界用得上的產(chǎn)品。

他寫道：“哪怕只是站在這臺(tái)巨型機(jī)器里的一顆小螺絲釘，也足夠讓人清醒，也足夠讓人興奮?！?/p>

這段話或許就是所有離開、留下，或者正好奇著OpenAI 的人，都會(huì)懂的一句話。

原文鏈接：https://calv.info/openai-reflections

以下為Calvin分享原文（由GPT翻譯）：

關(guān)于OpenAI 的思考2025 年 7 月 15 日

我三周前離開了OpenAI。我是在 2024 年 5 月加入這家公司的。

我想分享我的一些感想，因?yàn)閲@OpenAI 的所作所為有很多煙霧彈和噪音，但關(guān)于在那里工作的文化實(shí)際感受卻鮮有第一手的描述。

納比爾·奎雷希有一篇精彩的文章《對(duì) Palantir 的反思》，他在文中深思了 Palantir 的獨(dú)特之處。我也想趁記憶猶新時(shí)，對(duì) OpenAI 做同樣的反思。這里沒有任何商業(yè)機(jī)密，更多的是對(duì)這個(gè)歷史上最引人入勝的組織之一在極其有趣時(shí)期的現(xiàn)狀的一些感想。

先說明一下：我離開的決定中沒有任何個(gè)人恩怨——事實(shí)上我對(duì)此感到非常矛盾。從自己創(chuàng)辦的項(xiàng)目轉(zhuǎn)變?yōu)橐患覔碛?3000 名員工的組織中的一員，這種轉(zhuǎn)變很難。現(xiàn)在我渴望一個(gè)新的開始。

完全有可能是工作的質(zhì)量會(huì)吸引我回去。很難想象能打造出像AGI 那樣有深遠(yuǎn)影響的東西，而 LLMs 無疑是本十年的技術(shù)創(chuàng)新。我很幸運(yùn)能親眼見證一些發(fā)展，并且參與了 Codex 的發(fā)布。

顯然，這些并非公司的觀點(diǎn)——作為觀察，這是我個(gè)人的看法。OpenAI 是一個(gè)大平臺(tái)，這只是我對(duì)它的一扇小窗。

關(guān)于OpenAI，首先要了解的是它的快速成長。當(dāng)我加入時(shí)，公司員工剛剛超過 1000 人。一年后，人數(shù)已超過 3000，而我在任職時(shí)間上位于前 30%。幾乎所有領(lǐng)導(dǎo)層成員的工作內(nèi)容與 2-3 年前截然不同。

當(dāng)然，快速擴(kuò)張帶來了各種問題：如何作為一個(gè)公司進(jìn)行溝通，匯報(bào)結(jié)構(gòu)，產(chǎn)品發(fā)布流程，人員管理與組織，招聘流程等等。各團(tuán)隊(duì)文化差異顯著：有些團(tuán)隊(duì)一直全速?zèng)_刺，有些則在監(jiān)控大型項(xiàng)目運(yùn)行，還有些保持著更為穩(wěn)定的節(jié)奏。沒有單一的OpenAI 體驗(yàn)，研究、應(yīng)用和市場推廣部門的時(shí)間節(jié)奏也大相徑庭。

OpenAI 的一個(gè)特殊之處在于，所有一切——我指的是所有——都依賴 Slack 進(jìn)行。沒有電子郵件。在我整個(gè)任職期間，收到的郵件大約只有 10 封。如果你不善于組織，這會(huì)讓你感到極度分心。但如果你能合理管理頻道和通知，使用起來還是相當(dāng)可行的。

OpenAI 在研究方面尤其注重自下而上的方式。當(dāng)我剛加入時(shí)，我開始詢問下一季度的路線圖。得到的回答是：“這并不存在”（雖然現(xiàn)在有了）。好點(diǎn)子可以來自任何地方，而且通常很難提前判斷哪些點(diǎn)子會(huì)最有成效。與其說有一個(gè)宏大的“總體規(guī)劃”，不如說進(jìn)展是迭代的，隨著新研究成果的出現(xiàn)逐步顯現(xiàn)。

正因?yàn)檫@種自下而上的文化，OpenAI 也非常重視能力和貢獻(xiàn)。公司歷來的領(lǐng)導(dǎo)者主要是基于他們提出好點(diǎn)子并付諸實(shí)施的能力而晉升。許多非常有能力的領(lǐng)導(dǎo)者在全員大會(huì)上的演講或政治手腕方面并不擅長。在 OpenAI，這些方面的重要性遠(yuǎn)不如其他公司。最好的點(diǎn)子往往會(huì)勝出。

有一種強(qiáng)烈的行動(dòng)偏向（你可以直接去做事情）。類似的團(tuán)隊(duì)，雖然彼此無關(guān)，卻經(jīng)常會(huì)在各種想法上不謀而合。我最初參與了一個(gè)與ChatGPT 連接器類似的平行（但內(nèi)部）項(xiàng)目。在我們決定推動(dòng)發(fā)布之前，可能有大約 3-4 個(gè)不同的 Codex 原型在流傳。這些工作通常由少數(shù)幾個(gè)人在未獲許可的情況下自行開展。隨著項(xiàng)目展現(xiàn)出潛力，團(tuán)隊(duì)往往會(huì)迅速圍繞它們組建起來。

Andrey（Codex 負(fù)責(zé)人）曾告訴我，你應(yīng)該把研究人員看作他們自己的“小型高管”。有一種強(qiáng)烈的傾向是專注于自己的事情，看看結(jié)果如何。這里有一個(gè)推論——大多數(shù)研究都是通過“極客誘導(dǎo)”研究人員專注于某個(gè)特定問題來完成的。如果某個(gè)問題被認(rèn)為無聊或“已解決”，它很可能不會(huì)被繼續(xù)研究。

優(yōu)秀的研究經(jīng)理極具影響力，但同時(shí)也非常有限。最出色的經(jīng)理能夠連接許多不同的研究工作，匯聚成更大的模型訓(xùn)練。同樣的道理也適用于出色的產(chǎn)品經(jīng)理（向ae 致敬）。

我合作過的ChatGPT 產(chǎn)品經(jīng)理（Akshay、Rizzo、Sulman）是我見過的最酷的客戶之一。感覺他們幾乎已經(jīng)見識(shí)過一切。他們大多相對(duì)放手，但都聘用了優(yōu)秀的人才，并努力確保他們能夠取得成功。

OpenAI 能夠迅速調(diào)整方向。這是我們?cè)?Segment 非常重視的一點(diǎn)——隨著新信息的出現(xiàn)，做正確的事遠(yuǎn)比僅僅因?yàn)橛杏?jì)劃而堅(jiān)持原路更好。令人驚訝的是，像 OpenAI 這樣規(guī)模龐大的公司依然保持著這種精神——而谷歌顯然沒有。公司決策迅速，一旦決定追求某個(gè)方向，就全力以赴。

公司面臨著大量的審視。作為來自B2B 企業(yè)背景的人，這讓我有些震驚。我經(jīng)?？吹叫侣劽襟w爆出尚未在內(nèi)部宣布的消息。當(dāng)我告訴別人我在 OpenAI 工作時(shí)，常常會(huì)遇到對(duì)公司已有的既定看法。一些 Twitter 用戶運(yùn)行自動(dòng)機(jī)器人，檢查是否有新功能即將發(fā)布。

因此，OpenAI 是一個(gè)非常保密的地方。我不能向任何人詳細(xì)透露我正在做的工作。這里有幾個(gè)擁有不同權(quán)限的 Slack 工作區(qū)。收入和資金消耗數(shù)據(jù)則被更加嚴(yán)格地保密。

OpenAI 也是一個(gè)比你想象中更嚴(yán)肅的地方，部分原因是因?yàn)轱L(fēng)險(xiǎn)感非常高。一方面，目標(biāo)是構(gòu)建通用人工智能（AGI）——這意味著有很多事情必須做到位。另一方面，你正在打造一個(gè)產(chǎn)品，數(shù)億用戶依賴它來獲取從醫(yī)療建議到心理治療的各種服務(wù)。再另一方面，公司正參與全球最大的競爭舞臺(tái)。我們會(huì)密切關(guān)注 Meta、谷歌和 Anthropic 的動(dòng)態(tài)——我相信他們也在做同樣的事情。所有主要國家政府都在密切關(guān)注這一領(lǐng)域。

盡管OpenAI 經(jīng)常在媒體上受到詆毀，但我遇到的每個(gè)人實(shí)際上都在努力做正確的事。鑒于其面向消費(fèi)者的定位，它是大型實(shí)驗(yàn)室中最為顯眼的，因此也承受了大量的誹謗。

話雖如此，你大概不應(yīng)該把OpenAI 看作一個(gè)單一的整體。我認(rèn)為 OpenAI 起初像洛斯阿拉莫斯實(shí)驗(yàn)室一樣，是一群科學(xué)家和技術(shù)愛好者在探索科學(xué)前沿。這個(gè)團(tuán)隊(duì)偶然間催生了史上最具病毒傳播性的消費(fèi)級(jí)應(yīng)用。隨后，它的發(fā)展目標(biāo)擴(kuò)展到了向政府和企業(yè)銷售。組織中不同資歷和不同部門的人，隨后有了截然不同的目標(biāo)和觀點(diǎn)。你在那里的時(shí)間越長，越可能通過“研究實(shí)驗(yàn)室”或“為公益服務(wù)的非營利機(jī)構(gòu)”的視角來看待事情。

我最欣賞這家公司的一點(diǎn)是，它在分配人工智能利益方面“言行一致”。最先進(jìn)的模型并不局限于某個(gè)需要年度協(xié)議的企業(yè)級(jí)別。世界上任何人都可以直接使用 ChatGPT 獲取答案，即使沒有登錄。你可以注冊(cè)并使用 API——大多數(shù)模型（即使是最先進(jìn)或?qū)Ｓ械模┩ǔＲ矔?huì)很快進(jìn)入 API，供初創(chuàng)企業(yè)使用。你可以想象一種與我們今天所處的體系截然不同的運(yùn)作模式。OpenAI 為此應(yīng)當(dāng)獲得大量贊譽(yù)，這仍然是公司核心的基因。

安全性實(shí)際上比你從Zvi 或Lesswrong等大量閱讀中猜測的要重要得多。有大量人員致力于開發(fā)安全系統(tǒng)。鑒于 OpenAI 的性質(zhì)，我看到更多關(guān)注的是實(shí)際風(fēng)險(xiǎn)（仇恨言論、濫用、操縱政治偏見、制造生物武器、自殘、提示注入）而非理論風(fēng)險(xiǎn)（智能爆炸、權(quán)力尋求）。這并不是說沒人關(guān)注后者，確實(shí)有人專注于理論風(fēng)險(xiǎn)。但從我的角度來看，這并不是重點(diǎn)。大部分工作沒有公開發(fā)表，OpenAI 確實(shí)應(yīng)該做更多工作來發(fā)布這些內(nèi)容。

與其他公司在每次招聘會(huì)隨意發(fā)放周邊不同，OpenAI 幾乎不發(fā)放周邊（即使是給新員工）。取而代之的是“限時(shí)發(fā)售”，你可以訂購有現(xiàn)貨的商品。第一次發(fā)售時(shí)，需求量大到導(dǎo)致 Shopify 商店癱瘓。內(nèi)部還流傳著一篇帖子，講解如何正確 POST JSON 數(shù)據(jù)包以繞過限制。

與GPU 成本相比，幾乎所有其他開銷都微不足道。舉個(gè)例子：作為 Codex 產(chǎn)品一部分開發(fā)的一個(gè)小眾功能，其 GPU 成本與我們整個(gè) Segment 基礎(chǔ)設(shè)施的 GPU 成本相當(dāng)（雖然規(guī)模不及 ChatGPT，但也承擔(dān)了相當(dāng)一部分互聯(lián)網(wǎng)流量）。

OpenAI 可能是我見過的最令人畏懼的雄心勃勃的組織。你可能會(huì)認(rèn)為擁有全球頂級(jí)的消費(fèi)級(jí)應(yīng)用之一已經(jīng)足夠了，但他們渴望在數(shù)十個(gè)領(lǐng)域展開競爭：API 產(chǎn)品、深度研究、硬件、編碼代理、圖像生成，以及一些尚未公布的領(lǐng)域。這是一個(gè)孕育并推動(dòng)創(chuàng)意不斷前進(jìn)的沃土。

公司非常關(guān)注推特。如果你發(fā)了一條與OpenAI 相關(guān)且廣為傳播的推文，很可能有人會(huì)看到并加以考慮。我的一個(gè)朋友開玩笑說：“這家公司靠推特氛圍運(yùn)轉(zhuǎn)?！弊鳛橐患颐嫦蛳M(fèi)者的公司，這說法或許并不完全錯(cuò)誤。雖然他們確實(shí)還在大量分析使用情況、用戶增長和留存率，但氛圍同樣重要。

OpenAI 的團(tuán)隊(duì)比其他地方更加靈活。在推出 Codex 時(shí)，我們需要幾位有經(jīng)驗(yàn)的 ChatGPT 工程師的幫助以趕上發(fā)布日期。我們與一些 ChatGPT 的工程經(jīng)理會(huì)面提出請(qǐng)求。第二天，就有兩位非常厲害的人準(zhǔn)備投入并提供幫助。沒有“等待季度計(jì)劃”或“重新調(diào)整人員編制”的繁瑣過程，進(jìn)展非常迅速。

領(lǐng)導(dǎo)層非常顯眼且深度參與。在像OpenAI 這樣的公司，這或許很明顯，但每位高管似乎都非常投入。你會(huì)經(jīng)常在 Slack 上看到 gdb、sama、kw、mark、dane 等人積極發(fā)言。沒有缺席的領(lǐng)導(dǎo)者。

代碼

OpenAI 使用一個(gè)龐大的單一代碼庫，主要是 Python（盡管也有越來越多的 Rust 服務(wù)和少量用于網(wǎng)絡(luò)代理等的 Golang 服務(wù)）。這導(dǎo)致代碼風(fēng)格多樣，因?yàn)?Python 有很多不同的寫法。你會(huì)遇到既有來自擁有十年經(jīng)驗(yàn)的谷歌老兵設(shè)計(jì)的可擴(kuò)展庫，也有剛畢業(yè)博士寫的臨時(shí) Jupyter 筆記本。幾乎所有東西都圍繞 FastAPI 來創(chuàng)建 API，使用 Pydantic 進(jìn)行驗(yàn)證。但整體上并沒有強(qiáng)制執(zhí)行統(tǒng)一的代碼風(fēng)格指南。

OpenAI 的所有服務(wù)都運(yùn)行在 Azure 上。有趣的是，我認(rèn)為只有三項(xiàng)服務(wù)是值得信賴的：Azure Kubernetes 服務(wù)、CosmosDB（Azure 的文檔存儲(chǔ)）和 BlobStore。沒有真正等同于 Dynamo、Spanner、Bigtable、BigQuery、Kinesis 或Aurora的服務(wù)。自動(dòng)擴(kuò)展單元的思維方式也較為罕見。IAM 的實(shí)現(xiàn)通常遠(yuǎn)不如 AWS 那樣完善，而且有很強(qiáng)的內(nèi)部開發(fā)傾向。

在人員方面（至少在工程領(lǐng)域），Meta 到 OpenAI 的人才流動(dòng)非常顯著。在許多方面，OpenAI 類似于早期的 Meta：一個(gè)爆款的消費(fèi)級(jí)應(yīng)用、初步的基礎(chǔ)設(shè)施，以及快速發(fā)展的渴望。我見過從 Meta 和 Instagram 轉(zhuǎn)過來的大多數(shù)基礎(chǔ)設(shè)施人才都非常優(yōu)秀。

將這些因素結(jié)合起來，你會(huì)發(fā)現(xiàn)許多基礎(chǔ)設(shè)施的核心部分讓人聯(lián)想到Meta。內(nèi)部重新實(shí)現(xiàn)了 TAO，努力在邊緣整合身份認(rèn)證，我相信還有許多我不了解的其他項(xiàng)目。

聊天的概念非常深入。自從ChatGPT 走紅以來，很多代碼庫的結(jié)構(gòu)都是圍繞聊天消息和對(duì)話的理念構(gòu)建的。這些基本元素已經(jīng)深深植入其中，忽視它們可能會(huì)帶來風(fēng)險(xiǎn)。我們?cè)?Codex 中稍有偏離（更多借鑒了響應(yīng) API 的經(jīng)驗(yàn)），但仍然利用了大量已有的技術(shù)成果。

代碼取勝。與其依賴某個(gè)中央架構(gòu)或規(guī)劃委員會(huì)，決策通常由計(jì)劃執(zhí)行工作的團(tuán)隊(duì)做出。結(jié)果是行動(dòng)導(dǎo)向非常強(qiáng)烈，代碼庫中常常存在多個(gè)重復(fù)的部分。我大概見過半打左右的隊(duì)列管理或代理循環(huán)相關(guān)的庫。

在幾個(gè)方面，快速擴(kuò)展的工程團(tuán)隊(duì)和缺乏工具帶來了問題。sa-server（后端單體應(yīng)用）成了一個(gè)有些雜亂的地方。主分支上的持續(xù)集成（CI）故障比預(yù)期頻繁得多。即使測試用例并行運(yùn)行，并且只考慮部分依賴，使用 GPU 運(yùn)行也可能需要大約 30 分鐘。這些問題并非無法解決，但這提醒我們，這類問題無處不在，而且在快速擴(kuò)展時(shí)可能會(huì)變得更嚴(yán)重。值得肯定的是，內(nèi)部團(tuán)隊(duì)正高度重視并致力于改進(jìn)這一狀況。

我學(xué)到的其他東西

這就是大型消費(fèi)品牌的樣子。在我們開始開發(fā)Codex 之前，我并沒有真正意識(shí)到這一點(diǎn)。所有的衡量標(biāo)準(zhǔn)都是以“專業(yè)用戶”為單位。即使是像 Codex 這樣的產(chǎn)品，我們也主要考慮個(gè)人使用的入門體驗(yàn)，而不是團(tuán)隊(duì)使用。作為一個(gè)主要來自 B2B/企業(yè)背景的人，這讓我有些難以適應(yīng)。你只需一開關(guān)，流量從第一天起就會(huì)涌入。

大型模型的訓(xùn)練（高層次概述）。從“實(shí)驗(yàn)”到“工程”存在一個(gè)光譜。大多數(shù)想法最初都是小規(guī)模實(shí)驗(yàn)。如果結(jié)果看起來有希望，它們會(huì)被納入更大規(guī)模的訓(xùn)練中。實(shí)驗(yàn)不僅涉及調(diào)整核心算法，還包括調(diào)整數(shù)據(jù)組合并仔細(xì)研究結(jié)果。在大規(guī)模訓(xùn)練方面，幾乎看起來像是巨型分布式系統(tǒng)工程。會(huì)遇到各種奇怪的邊緣情況和意想不到的問題，調(diào)試這些問題的責(zé)任就在于你。

如何進(jìn)行GPU 計(jì)算。作為 Codex 發(fā)布的一部分，我們必須預(yù)測負(fù)載容量需求，而這也是我第一次真正花時(shí)間對(duì) GPU 進(jìn)行基準(zhǔn)測試。關(guān)鍵是你應(yīng)該從所需的延遲要求入手（整體延遲、令牌數(shù)量、首個(gè)令牌時(shí)間），而不是從底層分析 GPU 能支持的性能開始。每一次新模型的迭代都可能極大地改變負(fù)載模式。

如何在大型Python 代碼庫中工作。Segment 結(jié)合了微服務(wù)，主要使用 Golang 和 Typescript。我們沒有 OpenAI 那樣龐大的代碼量。我學(xué)到了很多關(guān)于如何根據(jù)開發(fā)者數(shù)量來擴(kuò)展代碼庫的經(jīng)驗(yàn)。你必須為“默認(rèn)可用”、“保持主分支干凈”和“難以誤用”等方面設(shè)置更多的保護(hù)措施。

發(fā)布Codex

我在OpenAI 的最后三個(gè)月中，很大一部分時(shí)間都投入到了 Codex 的發(fā)布。這無疑是我職業(yè)生涯中的一個(gè)重要亮點(diǎn)。

背景介紹：早在2024 年 11 月，OpenAI 就設(shè)定了 2025 年推出編程代理的目標(biāo)。到了 2025 年 2 月，我們內(nèi)部已有一些利用模型取得顯著效果的工具在運(yùn)行。我們感受到了推出專門針對(duì)編程的代理的壓力。顯然，模型已經(jīng)發(fā)展到對(duì)編程非常有用的階段（市場上新興的各種編程輔助工具的爆發(fā)即是明證）。

我提前結(jié)束了陪產(chǎn)假，回去協(xié)助參與Codex 的發(fā)布。一周后，我們經(jīng)歷了兩個(gè)團(tuán)隊(duì)（略顯混亂的）合并，隨后開始了瘋狂的沖刺。從最初編寫第一行代碼到完成，整個(gè)產(chǎn)品僅用了 7 周時(shí)間。

Codex 沖刺可能是我近十年來最努力的一次。大多數(shù)晚上都工作到十一點(diǎn)或午夜。每天早上五點(diǎn)半被新生兒叫醒。七點(diǎn)又去辦公室。大多數(shù)周末也在工作。我們作為一個(gè)團(tuán)隊(duì)全力以赴，因?yàn)槊恳恢芏贾陵P(guān)重要。這讓我想起了在 Y Combinator 的時(shí)光。

這種速度之快，難以用言語形容。我從未見過無論大小的組織能在如此短的時(shí)間內(nèi)，從一個(gè)想法發(fā)展到完全發(fā)布且免費(fèi)提供的產(chǎn)品。范圍也不?。晃覀儤?gòu)建了一個(gè)容器運(yùn)行時(shí)，優(yōu)化了代碼庫下載，微調(diào)了一個(gè)定制模型以處理代碼編輯，處理了各種git 操作，引入了全新的界面，啟用了互聯(lián)網(wǎng)訪問，最終打造出一個(gè)使用起來非常愉快的產(chǎn)品。 4

不管你怎么說，OpenAI 依然保持著那種開拓精神。

好消息是，合適的人才能創(chuàng)造奇跡。我們是一個(gè)由大約8 名工程師、4 名研究員、2 名設(shè)計(jì)師、2 名市場推廣人員和 1 名產(chǎn)品經(jīng)理組成的高級(jí)團(tuán)隊(duì)。如果沒有這支團(tuán)隊(duì)，我想我們?cè)缇褪×?。沒人需要太多指導(dǎo)，但確實(shí)需要相當(dāng)多的協(xié)調(diào)。如果你有機(jī)會(huì)與 Codex 團(tuán)隊(duì)的任何人合作，請(qǐng)知道他們每一個(gè)人都非常出色。

發(fā)布前一晚，我們五個(gè)人熬夜到凌晨4 點(diǎn)，試圖部署主單體系統(tǒng)（這是一個(gè)耗時(shí)數(shù)小時(shí)的過程）。然后我們又回到辦公室，準(zhǔn)備上午 8 點(diǎn)的發(fā)布公告和直播。我們開啟了功能開關(guān)，開始看到流量涌入。我從未見過一個(gè)產(chǎn)品僅僅出現(xiàn)在左側(cè)邊欄就能獲得如此迅速的增長，但這就是 ChatGPT 的力量。

在產(chǎn)品形態(tài)方面，我們最終確定了一種完全異步的形式。與當(dāng)時(shí)的Cursor（現(xiàn)在也支持類似模式）或 Claude Code 等工具不同，我們的目標(biāo)是讓用戶能夠啟動(dòng)任務(wù)，讓代理在自己的環(huán)境中運(yùn)行。我們的賭注是在最終階段，用戶應(yīng)該像對(duì)待同事一樣對(duì)待編碼代理：他們向代理發(fā)送信息，代理有時(shí)間完成工作，然后帶著一個(gè) PR 回來。

這有點(diǎn)像一場賭博：我們現(xiàn)在處于一個(gè)有些奇怪的狀態(tài)，模型表現(xiàn)不錯(cuò)，但還不算出色。它們可以連續(xù)工作幾分鐘，但還不能持續(xù)幾個(gè)小時(shí)。用戶對(duì)模型能力的信任程度差異很大。而且我們甚至還不清楚模型的真正能力到底有多強(qiáng)。

從長遠(yuǎn)來看，我確實(shí)相信大多數(shù)編程將更像Codex。同時(shí)，觀察所有產(chǎn)品如何展開將會(huì)非常有趣。

Codex（也許并不令人意外）非常擅長在大型代碼庫中工作，理解如何導(dǎo)航。與其他工具相比，我見過的最大區(qū)別是它能夠同時(shí)啟動(dòng)多個(gè)任務(wù)并比較它們的輸出。

我最近看到有公開數(shù)據(jù)比較了不同LLM 代理提交的 PR 數(shù)量。僅從公開數(shù)據(jù)來看，Codex 已經(jīng)生成了 63 萬個(gè) PR。自發(fā)布以來的 53 天內(nèi)，平均每位工程師提交了約 7.8 萬個(gè)公開 PR（你可以自行推測私有 PR 的倍數(shù)）。我不確定我這輩子是否曾參與過如此有影響力的項(xiàng)目。

離別感言

說實(shí)話，我最初對(duì)加入OpenAI 感到有些擔(dān)憂。我不確定放棄自由、接受上司管理、成為龐大機(jī)器中一個(gè)微小部分的感覺會(huì)是怎樣。我一直低調(diào)地保密自己加入了，萬一不合適的話。

我確實(shí)想從這次經(jīng)歷中獲得三樣?xùn)|西：

1、建立對(duì)模型訓(xùn)練方式及其能力發(fā)展方向的直覺理解

2、與杰出人才共事并學(xué)習(xí)

3、推出一款偉大的產(chǎn)品

回顧這一年，我認(rèn)為這是我做過的最明智的決定之一。很難想象在別處還能學(xué)到更多。

如果你是創(chuàng)始人，感覺你的初創(chuàng)公司真的沒有什么進(jìn)展，你應(yīng)該要么1）深入重新評(píng)估如何增加更多嘗試機(jī)會(huì)，要么 2）去加入一家大型實(shí)驗(yàn)室?，F(xiàn)在是一個(gè)極佳的創(chuàng)業(yè)時(shí)機(jī)，同時(shí)也是洞察未來走向的絕佳時(shí)刻。

在我看來，通向通用人工智能（AGI）的道路目前是一場三馬爭霸：OpenAI、Anthropic 和谷歌。每個(gè)組織都會(huì)根據(jù)自身的基因（面向消費(fèi)者、面向企業(yè)、堅(jiān)實(shí)的基礎(chǔ)設(shè)施加數(shù)據(jù)）走不同的路徑。在其中任何一家工作都會(huì)是一次開闊眼界的經(jīng)歷。

感謝Leah 在深夜時(shí)分給予極大的支持并承擔(dān)了大部分育兒工作。感謝 PW、GDB 和 Rizzo 給我這個(gè)機(jī)會(huì)。感謝 SA 團(tuán)隊(duì)的成員教我入門：Andrew、Anup、Bill、Kwaz、Ming、Simon、Tony 和 Val。還要感謝 Codex 核心團(tuán)隊(duì)帶我經(jīng)歷了人生難忘的旅程：Albin、AE、Andrey、Bryan、Channing、DavidK、Gabe、Gladstone、Hanson、Joey、Josh、Katy、KevinT、Max、Sabrina、SQ、Tibo、TZ 和 Will。我永遠(yuǎn)不會(huì)忘記這次沖刺。

每當(dāng)有領(lǐng)導(dǎo)離職時(shí)，人們很容易去解讀各種戲劇性事件，但我認(rèn)為其中大約70%的原因僅僅是這個(gè)事實(shí)。

我確實(shí)認(rèn)為我們正處于一個(gè)輕微的階段性變化。公司正在從外部大量招聘高級(jí)領(lǐng)導(dǎo)。我總體上支持這一點(diǎn)，我認(rèn)為公司從注入新的外部基因中受益匪淺。

我感覺，擴(kuò)展有史以來增長最快的C端產(chǎn)品往往會(huì)鍛煉出強(qiáng)大的實(shí)力。

當(dāng)然，我們也是站在巨人的肩膀上。CaaS 團(tuán)隊(duì)、核心強(qiáng)化學(xué)習(xí)團(tuán)隊(duì)、人類數(shù)據(jù)和通用應(yīng)用基礎(chǔ)設(shè)施使這一切成為可能。

我們也一直在堅(jiān)持。

幾周前我們看到Meta 有一些重要的招聘。xAI 推出了在基準(zhǔn)測試中表現(xiàn)出色的 Grok 4。Mira和 Ilya 都有很強(qiáng)的才華。也許這會(huì)改變局面（這些人很優(yōu)秀）。他們還有一些需要趕上的地方。