跳到正文

#推理

今日 75 條
今天10月6日週二
  1. 英國 AI Security Institute:Blog52

    AI 系統會否愈來愈難監督?

    英國 AI Security Institute 的報告指出,現有 AI 監督所依賴的基礎可能逐漸削弱,而新興方法尚未成熟到足以彌補。報告梳理內部激活、思維鏈、外部行動及智能體間通訊四類監督面向,並列出二十多條監督能力退化路徑。開發者可採取措施維持現有監督渠道,並投資新興技術,作為監督能力退化時的後備方案。

  2. HuggingFace Daily Papers(社區熱門論文)48

    RealtimeWAM:一步式非同步世界動作模型

    RealtimeWAM 透過一步動作生成與非同步推理,提升世界動作模型(WAM)的推理效率。其提出 Teacher-Anchored Consistency Distillation(TACD)及 Cross-Expert Wavefront Pipelining(CEWP),分別減少動作生成的多步迭代與影片、動作專家之間的等待。

  3. Cerebras:Blog76

    OpenAI 與 Cerebras 簽訂多年協議,部署總容量達 750 megawatts 的晶圓級系統

    OpenAI 與 Cerebras 簽訂多年協議,將分階段部署 750 megawatts 的 Cerebras 晶圓級系統,為 OpenAI 客戶提供服務。部署將於 2026 年開始;Cerebras 稱這將成為全球最大高速 AI 推理部署。Cerebras 表示,其系統上的大語言模型在編碼智能體或語音聊天場景中,回應速度較基於 GPU 的系統快達 15×。

    推薦理由:文章列出 750 megawatts 的部署規模,並引述 Cerebras 稱其推理回應較 GPU 系統快達 15×,呈現合作的規模與方案定位。

  4. Cerebras:Blog29

    更快推理如何為網絡安全公司帶來優勢

    更快的模型推理讓網絡安全公司能在既有工作流程內處理更多上下文、推理及驗證,並維持流暢的用戶體驗。實務上可採分層架構,由規則、傳統模型及小型語言模型先行篩選、分類和分流,再把可疑事件、高風險發現等交由較強的推理模型深入分析,兼顧日常流程速度與重要個案的分析深度。

  5. Zyphra Research41

    Tree Attention:面向 GPU 叢集長上下文注意力的拓撲感知解碼

    Zyphra 提出 Tree Attention,以樹狀歸約平行化多 GPU Transformer 解碼,實測可提升長上下文注意力的解碼速度並降低記憶體開銷。Zyphra 估算,在 1M 序列長度下,Tree Attention 的解碼速度較 Ring Attention 快逾 8x,通訊量則減至一半或更低。其跨裝置複雜度為對數級,而 Ring Attention 為線性級。

  6. Goodfire Research57

    Goodfire 剖析 DeepSeek R1 推理模型內部機制,公開兩個 SAE

    Goodfire 公開兩個以 DeepSeek R1 激活值訓練的稀疏自編碼器(SAE),並分享對推理模型內部機制及操控方式的早期研究。研究發現,R1 的特徵操控需等模型開始輸出「Okay, so the user has asked a question about…」一類思考前綴後才有效;部分特徵被過度操控時,模型反而會回復原有行為。

  7. Prime Intellect56

    Prime Intellect 發佈 INTELLECT-2,這是首個透過全球分散式強化學習訓練的 32B 參數模型

    Prime Intellect 發佈 INTELLECT-2,稱這是首個透過全球分散式強化學習訓練的 32B 參數推理語言模型。訓練以跨異構運算節點的全非同步 RL 為核心,並配套推出 PRIME-RL、TOPLOC 和 SHARDCAST;模型、程式碼及數據均已開源,技術報告見 primeintellect.ai/intellect-2。

  8. Goodfire Research62

    Goodfire Research 提出模型差分放大法,協助發現罕見不良行為

    Goodfire Research 提出模型差分放大法,放大模型在後訓練前後的 logits 差異,以協助浮現罕見不良行為。實驗顯示,該方法令湧現失配回覆增加 10 至 300 倍;當資料集含 5% 不良醫療建議時,有害回覆由每 10,000 次抽樣 1 次增至每 30 次 1 次。研究亦把此法用於監察後訓練和偵測後門行為;作者指出,放大後的回覆頻率不代表模型行為的實際發生率。

  9. Prime Intellect74

    Prime Intellect 推出 Lab 全棧模型訓練平台

    Prime Intellect 推出 Lab,將 Environments Hub、Hosted Training 和 Hosted Evaluations 整合為模型後訓練研究的全棧平台。平台現支援基於 prime-rl、使用 LoRA 的智能體強化學習訓練,並可在自建環境中執行。私測期間已完成逾 3,000 次 RL runs,現已向所有人開放。

  10. Goodfire Research54

    Goodfire Research 透過損失曲率分析模型記憶

    Goodfire Research 提出以損失曲率辨識記憶方向的模型編輯方法,移除低曲率權重方向以抑制背誦,無需標註指定遺忘資料。在採用 10% 隨機標籤噪聲的 ViT 實驗中,噪聲標籤記憶率由 81.6% 降至 3.5%,驗證準確率則由 67% 升至 71.7%。語言模型的純記憶任務準確率降至原有水平的 3–16%,邏輯推理維持或略有改善,但算術和封閉式事實回憶較易受影響。

  11. Prime Intellect66

    Prime Intellect 宣佈募集 $130M A 輪融資,以建設開放超級智能全棧

    Prime Intellect 於 2026 年 7 月 8 日宣佈募集 $130M A 輪融資,由 Radical Ventures 領投,多家投資者參與。公司稱,累計融資額已超過 $150M,將用於建設涵蓋訓練、部署及持續改進的開放超級智能全棧。Prime Intellect 表示,其全棧已有超過 6k 名客戶使用,年化收入在不足一年內升至超過 $100m。

  12. Goodfire Research52

    Goodfire 在 Llama 3.1 8B 第 18 層發現以圓形表徵運作的加法模組

    Goodfire 在 Llama 3.1 8B 第 18 層發現一個加法模組,透過多個圓形表徵並行計算不同模數下的和。該模組亦用於一般算術、星期及月份等循環概念的推算,數字以 Fourier features 表示。研究人員操控這些圓形表徵後觀察到月份預測隨輸出改變,作為模組參與月份推算的因果證據;文章指出相關實證仍未完整。

  13. Liquid AI 模型與工程博客60

    Liquid AI 發佈 LFM2-8B-A1B 端側 MoE 模型(已由 LFM2.5-8B-A1B 取代)

    Liquid AI 發佈 LFM2-8B-A1B 早期檢查點,這款端側 MoE 模型共有 8.3B 參數,每個 token 啟用 1.5B 參數。官方公佈 16 項基準測試結果,其中 MMLU-Pro 得分為 37.42,較 LFM2-2.6B 高 11.46 分;模型面向手機、平板及手提電腦的本地推理。頁首註明,該模型已棄用,並由 LFM2.5-8B-A1B 取代。