OpenAI 又一位重量級高管離職創業。
今天凌晨,OpenAI 後訓練團隊負責人 William Fedus 在 X 平臺官宣離職,並計劃創辦一家專注於利用 AI 發現新材料的初創公司。
據外媒 The Information 報道,Fedus 的前東家 OpenAI 預計將對其新公司進行投資並展開合作。
Fedus 於 2022 年從 Google 加入 OpenAI。作為後期訓練主管,他主要負責監督 ChatGPT、OpenAI 的開發者工具和其他產品的模型。
期間,他主導了 OpenAI 多個重要模型的後期訓練研發工作,包括但不限於 4o、o1-mini、o1-preview。
在 OpenAI 前後訓練負責人 Barret Zoph 離職後,他也因此晉升為後訓練團隊負責人。論文署名顯示,Fedus 是 o1 和 o3 模型的主要負責人之一。
教育背景方面,2010-2013 年,William Fedus 在麻省理工學院獲得物理學學士學位。
2013-2017 年,他在加州大學聖地亞哥分校獲得物理學碩士學位。隨後,他在蒙特利爾大學攻讀計算機科學博士學位,導師為 Yoshua Bengio 和 Hugo Larochelle。
值得一提的是,Yoshua Bengio 正是深度學習領域的奠基人之一,與 Geoffrey Hinton 和 Yann LeCun 共同榮獲 2018 年圖靈獎。
William Fedus 有過多段工作經歷,比如曾在 Google Brain 實習工作,研究生成對抗網絡(GANs)。
公開資料顯示,William Fedus 的研究興趣包括監督學習、無監督學習和強化學習,致力於構建穩健、可靠的算法。
2018 年,他與 Ian Goodfellow 和 Andrew M. Dai 共同提出 MaskGAN,這是一種用於文本生成的生成對抗網絡,通過填補空白來生成更高質量的文本
2019 年,他參與提出了一種無監督圖神經網絡方法,通過最大化節點表示和圖摘要之間的互信息來學習節點嵌入。
2022 年,他與 Barret Zoph 以及 OpenAI 研究員 Noam Shazeer 共同提出了 Switch Transformers。
這是一種通過稀疏激活實現萬億參數模型的高效架構,解決了模型複雜度、通信成本和訓練穩定性等問題。
離職消息官宣後,Google AI Studio 產品負責人 Logan Kilpatrick、OpenAI 研究員 Noam Brown 等好友紛紛在評論區送上祝福。
GPT-5 在路上了
OpenAI 管理層「地震」的同時, 內部的技術研發仍在持續推進。
最近,OpenAI 首席產品官 Kevin Weil 接受了一場採訪,再次談到了 GPT-5 等眾多熱門話題。他表示,OpenAI 正在整合 GPT 和 o 系列模型,推出更強大的 GPT-5。
但具體的推出時間尚未明確。
GPT-5 將簡化模型系列並統一功能集,具備之前各系列模型的所有工具和功能,如處理文件上傳、搜索網絡,甚至在推理過程中使用 Python 編程等能力。
關於 Deep Research,Kevin 表示這是自 ChatGPT 以來他們推出的最佳產品,能夠完成用戶無法自行完成的任務。他指出,這種成功是研究、產品、工程和設計團隊緊密合作的結果。
對於編程的未來,Kevin 認為,按照當前的發展速度,AI 在編程領域超越人類的時間會比 Anthropic 預測的 2027 年更早,可能會在 2026 年實現。
他指出,當推出 GPT-4 時,它已經是一個非常出色的編程模型,被廣泛應用於如 GitHub Copilot 等工具中。然而,與 o1 preview 相比,o1 在編程方面表現得更加優秀,因為推理能力在編寫代碼時至關重要。
無論是解決難題、填字遊戲、數獨還是編寫代碼,一定程度的推理能力都是必要的,能夠將問題分解成更小的部分,形成假設並驗證或反駁這些假設。
在他看來,今年內 AI 將在競爭性編程標準上永遠超越人類,就像 70 年前計算機在乘法運算上超越人類,這也將使軟件開發民主化,讓更多人能夠創建軟件。
此外,Kevin 還指出儘管生成內容變得更加容易,但人們仍然會重視那些花費大量時間和精力創作的作品。AI 將改變工作的性質,但不會取代人類的工作,而是補充和增強人類的能力。
對於未來的新工作類別,Kevin 認為幾乎所有工作都會被 AI 補充。他還提出了一個具體的創業點子——為每個孩子提供個性化的 AI 導師,以提高教育質量和生活水平。
當被問及是否考慮開發實體產品時,Kevin 表示 OpenAI 已開始關注機器人技術。
儘管具體形式尚未確定,但他認為機器人技術是未來的重要方向。在數字世界實現人工通用智能後,下一步自然是將技術擴展到現實世界,影響物理環境。
附上採訪原視頻地址:https://www.youtube.com/watch?v=SnSoMh9m5hc&t=88s&ab\_channel=Overpowered
本文來自微信公眾號“APPSO”,作者:APPSO,36氪經授權發佈。