ADVERTISEMENT
你可能還記得我在 9 月份發表的那篇關於 OpenAI 新模型系列 o1 系列(o1-preview 和 o1-mini)的 7000 字長文。我想強調兩件事: 首先,o1 是一種新型 AI 最原始的版本。從種子期去判斷一個新的典範是不適當的,讓它發芽,等它開花結果吧。 其次,那篇文章的最後一部分是付費閱讀的。它是「對長遠未來的 10 個影響」。(請注意其中特意強調的「長遠」!)我相信那一部分應該公開,所以我將在下面取消付費牆,把這些內容公開。
為了讓你不用去讀那 25 頁的冗長論述,先提供一些必要的背景。這十個影響,大致上是我在那篇文章的引言中提出的問題的答案:
- 推理型 AI 對生成型 AI 意味著什麼(它究竟是不是生成型的)?
- 使用者將如何與能夠思考的 AI 模型建立聯繫和互動?
- 當你允許推理模型思考數小時、數天甚至數週時,它們能做些什麼?
- 作為運算的函數,推理模型現在如何擴展性能?
- 公司將如何在訓練-測試流程中分配運算資源?
- 這一切對AI的終極目標意味著什麼?
- 這與 GPT-5 有什麼關係(如果有的話)
以下是 OpenAI o1 系列、新的測試時擴展規律,以及能夠推理的新 AI 典範對長遠未來的 10 個影響(為清晰起見,進行了一些編輯)。對於那些已經讀過它的人來說,讓它作為對未來的一種提醒。
ADVERTISEMENT
正在發生的事情比 OpenAI 發表的模型更大——大得多。它超越了擴展規律,超越了新的典範,也超越了生成型 AI。這一部分既是對今天的總結,也是對明天的展望。
- 生成型 AI 作為領先 AI 典範的時代已經結束。對於大多數不關心 AI 超出其可用範圍的使用者來說,這可能是最重要的影響。生成型 AI 是關於創造新數據的。但推理型 AI 並不關心這個。它的目的是解決難題,而不是生成垃圾。此外,OpenAI 隱藏了推理 token。其他公司也會這樣做。你仍然可以使用生成型 AI 工具來生成東西,但最好的 AI 將不再以生成為中心,而是以推理為中心。這是一種不同的東西,它的應用我們還不太了解。
- 聊天機器人的時代也結束了。人們仍然會用它們來閒聊,但它們不再是最好的 AI 了。AI 公司的努力將花在其他地方。OpenAI、DeepMind 和 Anthropic 將探索和擴展推理路線,將聊天機器人路線降級為次要優先事項。只要目前的聊天機器人服務繼續為它們提供經常性收入來源,它們就不會投入太多資源來改進它們,使其超出市場需求。
- 人類將在我們自認為適合的任務中,越來越少感受到與AI的平等感(最終感到自卑)。用戶與AI之間「平等關係」(例如在工作中的合作)的概念將成為過去。取而代之的是,我們將驚奇或恐懼地目睹AI深入到人類無法企及的廣度和深度。過去,我們是世界的建築師和建造者,但機械出現後,我們不再是建造者。現在,我們即將失去作為建築師的角色。
- 舊的擴展定律(所有計算資源用於預訓練和後訓練)已被新的擴展定律取代(計算資源分配在訓練和推理之間,使模型能夠實時推理)。從現在開始,使用我們過去四年來一直應用的常規啟發式方法預測未來將變得不可預測。是時候更新思維了(如果OpenAI決定大方提供更多細節)。
- OpenAI 終於將過去 20 年 AI 研究中最重要的兩個典範融合在一起:大型語言模型(OpenAI 的 GPT)和深度強化學習系統(DeepMind 的 Alpha)。這就是為什麼他們最終決定放棄 GPT 這個名字。從這個意義上說,o1系列在經過五年的長期研究後重啟了公司的研究方向。
- AI富人與AI窮人階層的出現。AI模型的成本上升速度將快於公司找到優化措施以降低成本的速度。不久後,新的定價級別(已有跡象)將出現,只有少數特權者能夠負擔起尖端AI模型的利益。其他人將被劃分為AI貧困階層。
- 我們自認為知道的關於 AI 的一切才剛剛改變。OpenAI 的創意、神秘、精神上的匿名研究員 Roon 說:「我們將不得不重寫所有關於平台和擴展等公共辯論中的常規對話樹。自回歸模型的錯誤是否會累積還是自我修復?語言是否可以導致真正的智慧?通向一般智慧的界限在哪裡。」我同意這一點。
- 這種新型AI對使用者來說沒有價值主張。大多數人不知道如何應用能夠推理的AI。這是一個揭示人類本質的事實。要找出一個能讓AI思考整整一天解決的問題並不容易。
- 這不是 ChatGPT 時刻。它不具備易用性,但意義深遠。大多數人將無法意識到它的意義有多大。ChatGPT 的主要特點是它的易用性(免費、易於使用、直觀)。GPT-3 的主要特點是它令人驚訝的能力——但你必須努力才能找到它們。o1 更像 GPT-3,所以大多數使用者不會理解它的價值(尤其是考慮到每個查詢的等待時間和當前的消息限制)。
- 這與GPT-5有何關聯?新的基礎模型仍在路上。o1基於GPT-4o,這意味著如果更改底層大型語言模型,仍有很大的改進空間。GPT-5 將利用這種新典範,但同樣,只有少數受眾會欣賞它的價值。但是,你仍然應該嘗試現在就開始轉型。o1 適用於科學和數學,這對你來說可能不是那麼有用。但最終目標是 JARVIS,然後是 AGI,然後——誰知道呢。你可能會想現在轉型不值得,但這是一個目光短淺的選擇:OpenAI 和其他公司將繼續開發新典範,因為這是有機會實現該領域最終目標的東西。
ADVERTISEMENT