跳到正文
10月8日週四
  1. HuggingFace Daily Papers(社區熱門論文)49

    Opera: A Verbal Critic Framework for Long-horizon Coding Agents

    Opera 是一套面向長時程編碼智能體的語言批評框架,會追蹤每項修正直至問題解決,並提升非批評智能體在三項基準測試上的問題解決率。在四個策略模型中,Opera 在 Terminal-Bench 2.1、SWE-Bench Pro 子集及 DeepSWE v1.1 分別帶來最高 12.4、15.0 及 8.9 個百分點的提升。

  2. HuggingFace Daily Papers(社區熱門論文)44

    思考慣性:大語言模型被要求不要思考時仍會繼續推理

    研究發現,六款大語言模型即使受到明確的「不思考」控制,仍會輸出明確的推理內容,呈現「思考慣性」;答案空間越開放,這種情況越常見。布林題和選擇題的準確率保持穩定,開放式題目則呈現僅輸出答案的遵從度與準確率之間的取捨。提供候選答案可令模型更容易只輸出答案。

  3. HuggingFace Daily Papers(社區熱門論文)41

    Recurrent Harness for Agentic Continual Learning

    ReHarness 是一個面向智能體持續學習的循環式 harness 框架,在嚴格線上串流協議下,透過回溯修訂 harness 狀態中的反思內容,補充正向讀取與寫入。它在三項持續學習基準及三種語言模型骨幹上,持續勝過原始上下文、記憶與反思,以及提示詞最佳化方法。分析顯示,ReHarness 能修正分佈轉移下過度概括或過時的經驗,並提升持續學習的穩定性與可塑性。

10月7日週三
  1. HuggingFace Daily Papers(社區熱門論文)50

    DAEDALUS:以自生成任務引導建立智能體記憶

    DAEDALUS 是一種從自生成練習中建立可重用智能體記憶的方法,無須既有任務或 oracle 驗證器。在 AppWorld、τ^2-bench 及 AutomationBench 上,相較無記憶基線,平均成功率最多提升 15.9 個百分點,pass^5 最多提升 2.2x,推理成本低於大部分使用訓練任務的方法。

  2. HuggingFace Daily Papers(社區熱門論文)48

    UNREAL: Unifying Retrieval and Long-Context with a Single Model

    UNREAL 提出模型原生的證據選擇框架,以單一機制涵蓋語料庫檢索與長上下文推理,並新增少於 500K 個可訓練參數,保持骨幹模型不變。在包含 3B 個 token、21M 個文本區塊的 Wikipedia 索引上,四種密集及混合式骨幹模型均勝過最先進的檢索器—重排序器系統;最佳模型在 HotpotQA 的召回率由 49.1% 提升至 73.2%。

  3. HuggingFace Daily Papers(社區熱門論文)32

    Towards In-Parameter Memory Augmentation for Large Language Models

    這篇綜述整理以參數內記憶增強大語言模型的方法,讓記憶資訊在推理時組合進模型的前向傳播。文章以記憶參數的位置(Embedding、Attention、FFN 層或混合)及取得時間(部署前或部署期間)分類,並探討幹擾、安全性、與 ICL 協同設計及遞歸自我改進等方向。

  4. HuggingFace Daily Papers(社區熱門論文)36

    HiPLEX: Hierarchical Policy Factorization for Full Duplex Speech Language Models

    HiPLEX 提出一種強化學習框架,將預訓練的全雙工文字策略分解為控制策略與條件式內容策略,分別決定何時輸出內容及輸出甚麼。Full-Duplex-Bench v1 上的 Moshi 三個隨機種子測試顯示,HiPLEX 相較 GRPO 降低自然停頓及回應機會中的搶話率,並縮短受打斷後的回應延遲,同時維持相若的評審中斷回應品質。

  5. HuggingFace Daily Papers(社區熱門論文)44

    World Models' Last Exam in Physics

    World Models' Last Exam in Physics 提出一個以量度為基礎的影片世界模型基準,評估生成影片的物理一致性。基準涵蓋力學、光學、流體、熱與相變、電磁學及表面張力,共設 40 項受控任務;在 8 個影片生成模型的 1,280 段影片中,最佳模型總分為 57.76/100。評估器與人類判斷的一致性高於直接使用視覺語言模型的基線。

  6. HuggingFace Daily Papers(社區熱門論文)35

    Controlled Acquisition and Abstention in Three-Channel Score Conflicts

    音訊、影片與文字分數不一致時,研究以受控三分數基準評估策略應否取得第三個來源或棄答。部分留出合成測試中,閾值策略的目標決策準確率為 0.789 +/- 0.006、效用為 0.481 +/- 0.014;三分數多數決參照分別為 0.626 +/- 0.008 和 0.252 +/- 0.016。查詢選擇策略的效用取決於預算及已觀察分數對的排序,在 50% 和 63.7% 預算下效用下降。

  7. HuggingFace Daily Papers(社區熱門論文)39

    Do Better Visual Representations Always Lead to Better End-to-End Autonomous Driving?

    ViRA 提出一套與規劃器無關的視覺表徵對齊框架,在保持規劃器架構及推理成本不變的情況下,提升端到端自動駕駛表現。研究發現,視覺基礎模型的目標選擇及輔助感知監督均會影響規劃效果。ViRA-Diffusion 在 NAVSIM v2 navtest 取得 92.3 EPDMS,較比較中的近期方法至少高 1.9 分。

  8. HuggingFace Daily Papers(社區熱門論文)31

    JoHan:影片條件式生成的 2D-3D 聯合手部動作復原

    JoHan 是一種可直接從影片序列復原手部動作的生成框架,會聯合生成對齊的 2D 和 3D 局部手部姿態序列,毋須依賴逐幀姿態預測。基準測試顯示,該方法提升局部手部姿態和相機空間重建的準確度與速度,生成的動作亦較以往方法平滑,同時保持較高的逐幀姿態準確度。

  9. HuggingFace Daily Papers(社區熱門論文)40

    Systematic Multi-Agent Vision-and-Language Navigation: Formulation, Benchmark, and Method

    研究將多智能體視覺語言導航系統化建模為受約束的協調問題,並提出導航系統 TRISS。MAVLN 基準包含 11,724 個回合,涵蓋 145 個場景及最多四個智能體的團隊,並設有三種指令模式。TRISS 結合基於大語言模型的子任務排程器、共享拓撲記憶及避碰執行機制;實驗顯示,排程、規劃與執行仍有改進空間。

  10. HuggingFace Daily Papers(社區熱門論文)46

    Beyond Semantic Similarity: Performance and Costs of Agentic Retrieval for Complex Tasks

    智能體檢索透過 ReAct 智能體迴圈,結合大語言模型的推理能力與檢索器探索語料的效率,以應付複雜檢索任務。使用相同嵌入模型時,它較標準檢索的 nDCG@10 高 8.7 分,並在 ViDoRe v3 和 BRIGHT 排行榜取得具競爭力的結果。代價是每次查詢平均需時 107.4 秒,消耗 764.1K 個輸入 token 和 5.8K 個輸出 token;標準檢索平均需時 0.67 秒。

10月6日週二
  1. HuggingFace Daily Papers(社區熱門論文)43

    What Matters for Latent Reasoning with Flow Matching

    研究提出 Flow-based Latent Reasoning(FLaRe),以 Flow Matching 在學得的潛在空間進行推理,並以五項要求檢視其有效性。在算術基準測試中,FLaRe 的表現優於先前的潛在推理方法;相較明確 CoT,準確率達 97%,延遲僅為四分之一。

  2. HuggingFace Daily Papers(社區熱門論文)41

    Representation-Space MMD for Diffusion Language Models

    研究提出一種擴散語言模型的後訓練方法,在凍結的預訓練模型特徵空間中,最小化生成分佈與參考分佈之間的最大均值差異(MMD)。實驗顯示,該方法在 OpenWebText 上以相若熵值取得較低生成困惑度,並改善 GSM8K 的準確率與計算量取捨;在 16B DMax-LLaDA2.0 模型上,亦提高解碼並行度,數學及程式碼基準的準確率相若或更高。

  3. HuggingFace Daily Papers(社區熱門論文)42

    On KL-Regularized Policy Optimization

    KLPO 為大型語言模型智能體的非同步強化學習提出一種 KL 正則化策略優化框架,透過最小二乘法擬合採樣器軌跡的對數比率,不需重要性權重。它以每個提示詞一次 rollout 計算無評論家的更新,不需學習正規化器或為每個提示詞生成一組回應;SPPO、GPO、REBEL 和 BPO 均可視為 KLPO 的特例。

  4. HuggingFace Daily Papers(社區熱門論文)46

    Self-Retrospection Distillation: Turning Post-hoc Experiences into Prior Foresight

    Self-Retrospection Distillation(SRD)利用互動後的軌跡經驗,監督智能體在互動前作出預見,並作為訓練目標,無需在推理時明確生成。在 10 項工具整合推理及長期智能體任務中,SRD 相較 RLVR 和自我蒸餾基線最高提升 24.2 pp。2B 設定下,當 98% 的 rollout 羣組全部失敗時,RLVR 成功率為 0.0%,加入 SRD 後達 60.6%。

  5. HuggingFace Daily Papers(社區熱門論文)46

    Co-Evolving Robot Orchestrators and Policies through Deployment

    研究提出 Robo-COP,讓機械人協調器與視覺—語言—動作(VLA)策略在部署期間共同演進,並根據執行示範在反覆失敗時微調策略。在 10 項模擬 RoboLab 任務中,留出任務的平均成功率由凍結策略的 64.8% 升至 73.8%;按固定時間表微調而不作驗證,成功率僅為 65.8%。在 3 項真實世界任務中,留出任務的成功率由 38.3% 升至 50.0%。

  6. HuggingFace Daily Papers(社區熱門論文)45

    Recurrent Looped Transformer

    Recurrent Looped Transformer(RLT)將 Transformer 層分配至平行因果編碼器和循環解碼器,使計算路徑隨序列長度增長,而每個 token 的成本固定。

  7. HuggingFace Daily Papers(社區熱門論文)65

    nanoMuse 提出面向個人所有裝置的開源智能體方案

    nanoMuse 報告提出以 GPL-3.0 授權的開源個人智能體方案,讓個人所有裝置上的智能體共用同一段對話。各裝置透過可由任何人運行的 relay 連接,每項操作都經 Sentinel;記憶以用戶可讀取的檔案保存,模型則由用戶選擇。報告亦根據 Meta 公開資料及一份生產環境提示詞副本分析 Muse,並把具來源追溯的記憶、操作評測套件和開放模型列入路線圖。

  8. HuggingFace Daily Papers(社區熱門論文)42

    A GPU-Parallel Framework for Heterogeneous Multi-Task Reinforcement Learning

    Hebero 是一個基於 GPU 並行的 Isaac Lab 機械人學習基準,可在 40 項異質任務上聯合訓練及評估單一策略。研究提出 DGPO 及 IW-ABC;每項任務使用 50 個示範時,IW-ABC 的狀態輸入平均成功率達 90.1%,比最強基線 FAMO-ABC 高 7.8 個百分點,視覺版本則達 93.5%。

  9. HuggingFace Daily Papers(社區熱門論文)38

    Task-Sufficient Contraction: Source Selection for Machine Information Interfaces

    研究分析「任務充分收縮」:按宣告任務縮減資訊來源,並保留後續完整問題族的解答結果。對有限動作集合,只有在每個可用動作的 regret 相同時才合併狀態;這種縮減可保留完整的一步 rate-regret 曲線,即使失真目標尚未選定。對仿射可行動作集合中的二次損失,精確的縮減來源是投影至可行動作能有所差異的方向。

10月5日週一
  1. 404 Media66

    arXiv 收緊投稿限制,以應對 AI 撰寫低質論文增加

    arXiv 收緊投稿限制,每位研究者每個曆月最多可提交兩篇,並且同一時間最多有三篇有效投稿。arXiv 表示,投稿量由 2016 年 9 月的 9,869 篇增至 2024 年 9 月的 20,569 篇,再增至 2026 年 9 月的 40,363 篇;近兩年整體投稿量翻倍,電腦科學類別增至六倍。

  2. HuggingFace Daily Papers(社區熱門論文)44

    MEND: RL For Flow Models via Proximal Velocity Matching

    MEND 提出一種以近端速度匹配為基礎的流模型強化學習方法,透過獎勵上限和位移成本篩選更新方向,不使用 KL 項、凍結參考模型或優勢權重。在 100 次更新後,MEND 在六項評估指標中的五項超越 Flow-GRPO,且與基礎模型圖像的距離相同;在相同預算下,它於四種訓練獎勵的每個評估更新點均勝過 ReFL 和 DiffusionNFT。

  3. HuggingFace Daily Papers(社區熱門論文)41

    S2PD: Serial-to-Parallel Diffusion for Physically and Logically Consistent Video Generation

    S2PD 提出序列到並行擴散方法,先在高噪聲階段進行自回歸擴散,再於低噪聲階段切換至並行擴散,以提升影片生成對物理規律和符號規則的遵循能力。研究以從頭訓練的像素空間 diffusion transformer,以及透過 LoRA 微調並採用因果注意力改造的預訓練影片模型實作 S2PD。

  4. HuggingFace Daily Papers(社區熱門論文)46

    CLIFT: Conformal Self-Verification for Web Agent Training and Test-Time Scaling

    CLIFT 以保形自我驗證把稀疏評審回饋轉為可重用的訓練獎勵,並支援無需外部評審的測試時軌跡選擇。在 WebArena Infinity,CLIFT 在開源 Web 智能體中達到最先進表現;在 VisualWebArena,使用開源模型訓練的問題庫轉移至 GPT-5.5 後,亦達到最先進表現。在 Online Mind2Web,將認證問題庫轉換後,可提升即時網頁智能體的零樣本評估表現。

  5. HuggingFace Daily Papers(社區熱門論文)38

    Rationale-Guided Policy Optimization: Learning to Reason with Adaptive Rationale Scaffolding

    RGPO(Rationale-Guided Policy Optimization)是一種按模型當前能力自適應運用真實推理依據、同時保留探索空間的強化學習框架。它把參考解答作為暫時支架,並只將獎勵較高的模型生成解答轉回無引導設定。在純文字及視覺語言推理任務中,RGPO 的表現均優於 RLVR 基線。

  6. HuggingFace Daily Papers(社區熱門論文)45

    巨型激活值的生命週期:隨機形成、權重衰減驅動的增長與競爭性集中

    研究發現,權重衰減會因果性地調控 Transformer 中巨型激活值的整體尺度變化。控制實驗顯示,在峯值附近移除權重衰減,尺度會繼續上升;保留權重衰減則會下降,即使學習率不變。掃描衰減係數 λ 時,峯值時間約呈對數線性移動,峯值幅度則約按 λ^{-1/2} 縮放。

  7. HuggingFace Daily Papers(社區熱門論文)40

    Closing the Context Gap: Activation Alignment for Tabular In-Context Learning

    激活對齊利用完整上下文訓練模型,使模型在只使用部分上下文時,仍能維持接近完整上下文的預測表現。研究在 TabArena 的 38 個分類數據集上評估 TabPFN-3 和 TabFM,兩者經對齊的學生模型在不同上下文預算下均顯著優於未對齊基線;低數據量時,對齊可追回教師模型近一半的預測優勢。對齊器在合成無標籤數據上訓練,無需 GPU,並可在數秒至數分鐘內收斂。

  8. HuggingFace Daily Papers(社區熱門論文)43

    BRACE:調整全身參考動作,實現具施力控制與地形適應能力的人形機械人動作追蹤

    BRACE 是一種全身人形機械人動作追蹤器,將地形適配及指定手部施力納入參考動作,並以 DAgger 將施力及補償教師策略蒸餾成只依靠本體感知的 flow-matching 學生策略,無需高度圖或量度到的 wrench。該策略可在跟隨平地參考動作時適應斜坡,並施加或補償手部力量;Unitree-G1 的模擬及真實機械人實驗展示其處理力量及多種地形的能力。

  9. HuggingFace Daily Papers(社區熱門論文)41

    PrisMem:智能體記憶的能力驅動式自我演化

    研究團隊提出 PrisMem,將智能體記憶程式的演化搜尋由整體表現擴展至個別能力維度,並以依賴感知的能力選擇、歷史引導診斷及軌跡引導整合改進記憶程式。在 BEAM-1M 和 LongMemEval-M 上,PrisMem 分別較最強基線高 10.54 和 7.83 個百分點,並在 million-token 歷史記錄上展現成效。

  10. HuggingFace Daily Papers(社區熱門論文)42

    What Did the Agent Actually Do? Evidence-Grounded Oversight for Long-Horizon Agents

    研究提出以證據為本的行為圖(EBG),整理智能體執行軌跡中的證據,協助識別重要決策並追溯依據。研究亦推出 AgentMonBench,並將免訓練的 EBG 整合至 Codex Harness,在執行前、重要變更後及提交結果前設置監督檢查點。八個模型的實驗顯示,EBG 在大多數評測設定中提升了重要決策識別及證據定位能力。