AI 研究者辯論距離遞歸式自我改進還有多遠
Dwarkesh Patel 與 John Schulman、Beren Millidge 和 Charlie O’Neill 探討現行訓練方法能否推動 AI 遞歸式自我改進。對談聚焦模型能否自行設定研究目標、從訓練環境泛化至現實任務,以及樣本效率和持續學習的限制。嘉賓亦討論蒸餾、RL 環境和部署數據對模型迭代的作用,以及長期判斷和目標設定的難處。
Dwarkesh Patel 與 John Schulman、Beren Millidge 和 Charlie O’Neill 探討現行訓練方法能否推動 AI 遞歸式自我改進。對談聚焦模型能否自行設定研究目標、從訓練環境泛化至現實任務,以及樣本效率和持續學習的限制。嘉賓亦討論蒸餾、RL 環境和部署數據對模型迭代的作用,以及長期判斷和目標設定的難處。
Pragmatic Engineer 訪問 Codex 開發者、OpenAI Core Products & Platform 部門主管 Tibo Sottiaux,探討 Codex 的構建決策、演進及團隊使用方式。
Jakub Pachocki 反思日益強大的 AI,以及維持其對齊所面臨的挑戰。他呼籲加強防護措施及國際協調。
Dylan Patel 在與 Dwarkesh Patel 的訪談中預測,若目前趨勢延續,Anthropic 與 OpenAI 到 2028 年底將掌握全球大部分可用算力。
Gergely Orosz 訪問 Addy Osmani,回顧他從 Chrome DevTools、Core Web Vitals 到 AI 開發者體驗的工作歷程。
elsewhere 訪問五源資本合夥人孟醒,他表示人生的驅動力是體驗與不同,也坦言很怕和別人一樣。孟醒曾做投行、兩度創業,之後從事科技投資並加入滴滴負責自動駕駛,2024年重返投資行業;他在順為投資的 Momenta 其後上市。
「十字路口」公路播客與 BAI Capital 高級合夥人汪天凡對談,探討他投資 15 年仍熱愛這個行業的動力,以及 2026 年 AI 投資該如何取捨。他認為 AI 應用的新機會藏於 Context 與互動,AI 硬件真正稀缺的是產品定義與人性的光輝;投資應看重能讓人更快樂的產品和有願景的創業者,而非只追逐效率。
Airwallex 首席營收官吳愷在「十字路口」對談中回顧公司用 11 年從 0 發展至 110 億美元估值,並探討 AI 對科技金融的改變及公司邁向 1,000 億美元估值的路徑。Airwallex 的 ARR 約 13 億美元、年增速約 74%,現有 20 多萬客户。對談亦涵蓋 Kai、AgentOS、T:0、Airi 等產品,以及收購 Leapfin、OpenPay 的考量。
Arvind Narayanan 在 ICML 主題演講中主張,AI 會逐步改變並重組工作,但不會因實驗室內某個能力里程碑而突然令所有人失業。他以 AI as Normal Technology 框架概括能力、產品、早期採用和適應四個階段,認為工作結構的適應最慢,需時數十年。他預期 AI 會令工作重心由建造系統轉向評估、判斷與引導,並主張培養與 AI 互補的技能及維持使用上的自主掌控。
英靈殿創始人 Odin 在《十字路口》公路播客中談及 AI for Science 創業願景,核心是打造「全模態分子世界模型」與「通用科學人工智能」。他離開 David Baker 實驗室後創業,短時間內融資數千萬美元,團隊有 30 人。其目標是打造「新時代科學發現的蒸汽機」,把人類科學進程壓縮上百年。
節目邀請空山慈科技聯合創始人王曦明,討論團隊如何透過腦機互動與神經調控,探索抑鬱症、睡眠障礙及認知問題的下一代解決方案。對談亦涉及大腦的隱形負擔,以及腦科學、醫學工程、AI、仿真、硬件與臨牀驗證的結合。
MIT 校長 Sally Kornbluth 在 Washington Post Live 討論如何透過好奇心導向研究與教育,培育能引領美國應對 AI 時代的下一代人才。她主張保留基礎學科、加強道德、公民與倫理教育,並讓學生把 AI 作為增強工具,透過團隊協作學習。她警告,聯邦資金雖已撥予大學,款項大多尚未發放;若缺少好奇心導向研究資助,創新及人才培育管道可能枯竭。
Hamel Husain 指出,AI 產品若難以評測,往往也難以讓用戶核實輸出,因此產品設計應先降低驗證難度。文章以數據智能體、體育課教案工具和工傷賠償醫療報告工具為例,提出展示來源與假設、提供可核查的中間產物,並把輸出拆成較小的審核單位。這樣可降低標註成本,並為自動評測提供更明確的依據。
Ethan Mollick 主張應有意識地選擇哪些認知工作交由 AI 處理,而非預設讓 AI 代做,避免削弱學習與思考所需的投入。土耳其高中數學實驗中,使用 ChatGPT 的學生作業表現較好,但測驗成績低於未使用 AI 的同學;台北高中五個月 Python 課程中,使用 AI 導師個人化題目序列的學生,在無 AI 協助的期末考高出 0.15 個標準差。
Sam Altman 分享了指引 OpenAI 工作的五項原則。OpenAI 的使命是確保 AGI 惠及全人類。
Hamel Husain 認為,LLM API 雖讓團隊可自行整合 AI,評測、實驗設計和生產監測仍需要數據科學方法。文中列出五類評測陷阱,包括套用通用指標、未驗證 LLM 評審、測試集設計不當、數據及標籤質素欠佳,以及過度自動化。作者建議檢視 traces、以人工標註驗證評審,並根據真實生產數據設計測試集,讓領域專家參與標註。
Hamel Husain 因 AI 編碼工具改變開發工具的取捨,停止使用自己曾協助建立及維護的 nbdev。nbdev 以 Jupyter notebooks 作為程式碼、文件和測試的單一來源,再轉譯成 Python 程式庫和文件網站;他認為這種工作流令 AI 工具難以分辨應修改 notebook 還是最終程式碼。
OpenAI 回顧十年進展,從早期研究突破到廣泛使用、重塑可能性的 AI 系統。OpenAI 分享過去十年的經驗,並闡述其仍對建造造福全人類的 AGI 抱持樂觀。
CNA 正以 AI 推動新聞編輯部轉型。OpenAI 的 Executive Function 系列收錄總編輯 Walter Fernandez 對 AI 採用、新聞編輯部文化及新聞業未來的見解。
DoorDash 首席人事官 Mariana Garavaglia 在問答中談到,公司如何擴大 AI 應用,讓員工更快構建、學習與創新。
Model ML 正協助金融機構以 AI 從頭重建業務。Model ML 行政總裁 Chaz Englander 在 Executive Function 系列中,談及 AI 原生基礎設施與自主智能體如何改變金融服務工作流程。
AI 有望為比歷史上任何其他技術更多的人帶來機遇;若能妥善發展,便可讓每個人擁有比以往更大的力量。
OpenAI 將 ChatGPT 設計為實用、可信賴且可調適的產品,讓使用者能按自身需要打造個人化使用體驗。
Sam Altman認為,人類已進入通往數碼超級智能的加速階段,而奇點將逐步展開。他預期2025年會出現能承擔實際認知工作的智能體,2026年可能出現能提出新見解的系統,2027年或有能執行現實任務的機械人。他主張解決對齊問題,並讓超級智能廉價、廣泛可用,避免集中於個人、公司或國家。
John Deere 的 Justin Rose 分享公司如何運用 AI 推動農業轉型,並擴大創新規模。這些創新旨在協助農民工作得更聰明、更有效率,並以更可持續的方式工作。
Speak 正以 AI 個人化語言學習。文章以對談形式訪問 Speak 行政總裁兼共同創辦人 Connor Zwick。
Canva 以 AI 助力創意表達。內容是一場與 Canva 共同創辦人兼首席產品官 Cameron Adams 的對談。
EliseAI 以 AI 提升住房及醫療保健效率。內容是一段與 EliseAI 行政總裁兼聯合創辦人 Minna Song 的對談。
LaunchDarkly 首席產品官 Claire Vo 分享 AI 驅動產品管理的做法。對談聚焦產品經理角色的變化、她的「反待辦清單」,以及打造 AI 原生團隊。
Wayfair 正以 AI 塑造零售業未來。內容聚焦與 Wayfair 首席技術官 Fiona Tan 的對談。
Sam Altman提出三項關於AI經濟的觀察,認為模型智能大致隨訓練及推理計算資源的對數增加,智能的社會經濟價值則呈超指數增長。他指出,同等 AI 水平的使用成本約每 12 個月下降 10x;以 GPT-4 於 2023 年初和 GPT-4o 於 2024 年中的每個 token 價格相比,價格約下降 150x。
Sam Altman 回顧 OpenAI 近九年的發展,反思 ChatGPT 推出後的高速成長與治理風波,並稱公司目前有信心知道如何構建傳統意義上的 AGI。OpenAI 的每週活躍用户由約 100 million 增至逾 300 million,Altman 預計 2025 年可能有首批 AI 智能體加入職場並實質改變企業產出。
Jeff Boudier 與 Writer 聯合創辦人兼 CTO Waseem Alshikh 對談,探討 Writer 運用 Hugging Face 處理複雜生成式 AI 用例。
Hugging Face 研究科學家 Sasha Luccioni 在訪談中談及她對機器學習模型與數據集的倫理、社會影響及環境足跡研究。她擔任 Big Science Workshop 碳足跡工作組共同主席,探討電子郵件排放與製造成本等環境影響,並參與數據整理和多語言工作,避免語料過度偏重英語。
Hugging Face 第 2 部分 SaaS 專題彙集 Salesforce、Amplitude 等企業機器學習主管的觀點,聚焦 ML 的應用效益、落地挑戰與未來發展。
Hugging Face《Machine Learning Experts》專訪 Lewis Tunstall,談其 Transformers 工作及新書《NLP with Transformers》。他介紹 Transformers library 可將 PyTorch 模型匯出為 ONNX 格式,讓工程師進一步降低延遲、提高吞吐量。
Sam Altman指出,與容易起步的初創企業相比,難度高的初創企業往往更容易成功。這類企業若成功便具價值,也能以有意義的使命吸引人才,助力招聘、獲取建議、建立合作及融資。作者建議創業者設定遠大願景、保留可行的下一步,並作長期投入。
Sam Altman 澄清,他主張社會容許有爭議的觀點,並非要求實驗室容忍恐同且品行惡劣的人。他指出,不受歡迎的觀點可能促成科學進展與社會變革;禁止討論冒犯性議題有風險,但仇恨歧視言論與重要爭論之間的界線難以劃定。
Sam Altman認為,人類與機器的融合已經開始,是人類與 AI 共同演化的漸進過程,而非單一時刻。手機、社交媒體和搜尋引擎的演算法已影響人的行為、感受與想法。他預計超人類 AI、基因增強和腦機介面終將出現,並呼籲全球及早協調、認真應對。