清華數學系大神跳槽OpenAI！曾主導SAM與Llama開發

henry 發自 凹非寺
量子位 | 公眾號 QbitAI

又一位清華大神加入OpenAI！

剛剛，畢業清華大學數學系，曾在Meta FAIR工作3.75年、主導過SAMLlama多項核心工作的研究員張鵬川（Pengchuan Zhang）宣布離職。

他的下一站，是來到OpenAI，投身于世界模擬與機器人學（World Simulation and Robotics）方向的研究。

他在推特中寫道，自己非常期待探索視覺感知、世界模型與機器人技術如何融合，構建真正的“物理智能”。

OpenAI世界模擬方向的負責人之一、Sora項目資深領導Aditya Ramesh也第一時間留言歡迎。

從視覺理解到底層世界模型，這一步轉向本身就很有意味。

那么，這位曾站在SAM與Llama核心位置的研究員，究竟是誰？

張鵬川是誰？

2007年，張鵬川從重慶市南開中學高中畢業，考進清華大學，主修數學。

本科畢業后，他前往美國加州理工學院（Caltech）攻讀博士，于2017年獲得應用與計算數學博士學位。

博士期間，他專注于機器學習理論與應用，開始探索深度學習在視覺領域的潛力。

博士畢業后，他加入微軟研究院，并在Microsoft Research雷德蒙德擔任首席研究員。

期間，他領導了雷德蒙德實驗室的計算機視覺與多模態智能研究工作。

同時還在微軟內部跨組織推動計算機視覺與多模態智能項目，包括Alexandar Multi-Modal和Florence等方向。

值得一提的是，他在2021年還加入了華盛頓大學，擔任電氣與計算機工程系的兼職助理教授至今。

2022年起，他轉入Meta FAIR（現Meta超級智能實驗室），研究計算機視覺與多模態智能，累計工作近4年。

在此期間，他主導多項開創性項目，包括：

擔任Segment Anything 3（SAM 3）項目負責人：SAM 3是一個統一框架，可在圖像和視頻中實現目標檢測、分割與跟蹤。

作為SAM系列最新迭代（2025年11月），該模型推出統一框架，支持圖像和視頻中的目標檢測、分割與跟蹤，實現零樣本泛化到任意物體和場景。

擔任Llama 3視覺 grounding項目負責人，主導輸入側視覺 grounding能力建設，使Llama 3成為首個在Visual Commonsense Reasoning（視覺常識推理）基準上達到人類水平的開源模型。

擔任Llama 4視覺grounding項目負責人，延續Llama 3優勢，進一步強化專家級圖像grounding能力（如像素級定位與復雜場景理解），被視為Llama 4對標GPT-4o的關鍵差異化亮點。

這些工作不僅提升了Meta的生成式AI競爭力，還為開源社區貢獻了高影響力工具。

截至目前，張鵬川谷歌學術被引高達34659次！

One more thing

在張鵬川的推特下方，一位網友忍不住發問：

• 為什么突然之間所有人都在加入 OpenAI？我是挺興奮的，但這是為什么？

這個疑問，其實并不突兀。

自2025年底以來，已經有多位業內知名人物陸續加入 OpenAI——

括姚班大神陳立杰，Roblox高管Arvind KC，《性能之巔》作者Brendan Gregg，以及從Thinking Machines Lab回流的Barret ZophLuke MetzSam Schoenholz等人。

與此同時，前段時間刷屏的xAI離職潮，也讓不少人猜測——

OpenAI會不會成為這些頂尖研究者的下一站？

對此，評論區有位網友回復得很直接：

• 因為（OpenAI）有算力+Sora級別的世界建模基礎設施。如果沒有這兩樣，到2026年幾乎不可能做出真正高水平的機器人系統。

如果這條判斷成立，那么張鵬川的選擇，或許不只是一次個人職業轉向。

也是OpenAI今年對“世界模型 + 物理智能”路線的下注。

讓我們期待鵬川在OpenAI的工作！

[1]https://pzzhang.github.io/pzzhang/

[2]https://scholar.google.com/citations?hl=zh-CN&user=3VZ_E64AAAAJ&view_op=list_works

[3]https://x.com/PengchuanZ/status/2026189659228012558?s=20