CausGround:面向自適應具身規劃的因果互動 grounding
CausGround 從互動經驗中提取可重用的動作前置條件與效果,支援跨環境具身規劃和推理,無需重新訓練模型。在 VirtualHome,平均任務成功率由 24.9% 升至 53.3%;在 RoboCasa,閉環規劃成功率由 43.0% 升至 57.0%。在 SWITCH,互動推理準確率由 25.8% 升至 31.9%。
CausGround 從互動經驗中提取可重用的動作前置條件與效果,支援跨環境具身規劃和推理,無需重新訓練模型。在 VirtualHome,平均任務成功率由 24.9% 升至 53.3%;在 RoboCasa,閉環規劃成功率由 43.0% 升至 57.0%。在 SWITCH,互動推理準確率由 25.8% 升至 31.9%。
Self-Assessment Reinforcement Learning(SARL)讓模型在訓練期間識別搜尋狀態、改善搜尋行為,無須在推理時額外評估。雙重獎勵設計鼓勵有效而高效的搜尋軌跡,SARL 較最強基線相對提升 24.3%,在多跳推理及深度研究基準上平均分別提升 35.9% 和 27.9%。作為獨立強化學習框架,SARL 在延長搜尋過程中仍能保持訓練穩定。
RoboValue 提出細粒度模擬與真實世界基準,統一評估機械人價值模型的四項能力。RoboValue-Dataset 涵蓋 15 項模擬及 20 項真實世界操作任務,並提供專家示範和標註軌跡。測試發現,模型在指令細節理解、依賴歷史的進度追蹤及恢復評估方面仍有錯誤。
研究提出 PhysRSI-eval,量化視覺語言智能體在實體操作中的遞迴自我改進能力,並分析其觀察性擴展規律。五軸指標涵蓋首次嘗試表現、效率、成功、預算及從失敗中改進;研究在固定互動預算下測試不同 VLM 的 18 項操作任務。移除歷史記錄會降低後期成功率,凍結工作空間對未見佈局仍有用,三個跨任務案例亦較早成功。
KronLSTM提出 Kronecker Delta Rule,以穩定的關聯式記憶更新改善長上下文建模,無需額外正規化或記憶狀態穩定化機制。實驗顯示,它在長上下文基準測試表現尤其突出,並常勝過包括(Gated)DeltaNet 系列在內的現有線性注意力架構。其程式碼及模型已開源。
HandsOn 是一個跨機體模擬平台及靈巧操作基準,評估機械臂、靈巧手、物件和組合任務之間的泛化能力。平台支援 5 款機械臂、6 款靈巧手,並提供約 200 個資產、18,000 段人類示範及 66 項經人工驗證的任務;最佳受訓多任務策略在 Core-50 的成功率為 29.1%。
Vision-Language-Delta-Action(VLDA)提出以精簡 Delta 建模可執行狀態轉換,連接視覺語言理解與動作生成。方法結合 LT-Filter、GT-Anchor 和 DDAR,並在開源訓練框架 LoongForge 中實作。實驗顯示,VLDA 提升長時序一致性、穩健性和泛化能力。
InfiniDream 是一套視覺語言模型框架,透過符號化程序資產生成及確定性場景放置,生成開放式、可編輯的照片級寫實 3D 世界。其文字到世界流程結合語義場景規劃與確定性視錐引導網格放置,以構建具精確物件放置、程序化填充及動畫的大型 3D 世界。在 100 項物件及 20 項場景生成任務中,InfiniDream 在四項感知指標上均有提升。
研究團隊提出 AnyGoal 基準測試及開源程式庫,用以評估世界模型能否將熟悉的狀態與動作組合泛化至未見情境,以支援規劃。測試任務取自常用世界模型環境,個別狀態因素與動作均在訓練範圍內,但相關組合在專家軌跡中較少出現。多個環境和世界模型系列的結果顯示,現有模型在這類重新組合下持續失效。
EgoXperience 提出一套框架,從第一人稱影片共同重建攝影機運動、場景幾何、手部與物件,並以單次前向推理在共享世界座標系中完成重建。其 EgoX-Data-6M 是包含 50 小時活動影片的數據集,EgoX-Bench 則用於評估聯合重建。相較最強的受評基線,EgoX 的攝影機、手部及深度誤差分別降低 68.9%、65.6% 和 42.9%,物件姿態評分提升 28.0%。
RoboJudge 提出 RoboJudge-Bench 和 RoboJudge-Train,並微調出 9B 評審模型 RoboJudge-9B,用於評估具身影片生成的物理遵循度和指令對齊度。
Ask-to-Distill 透過優化合成問題,提升在策略知識蒸餾中的教師與學生分佈監督效果,過程無需正確答案。此方法在數學推理、程式碼生成及智能體任務中,平均表現和教師差距恢復均優於未優化的學生生成提示詞及經 KL 篩選的真實問題,在評估設定中與真實問題集蒸餾持平或更佳。程式碼、數據及模型均已公開。
ReTrace 是一套評估電腦使用智能體復原行為的框架,透過目標導向動作重播研究受控錯誤注入後的復原能力。研究將「轉移一致復原」定義為:從復原狀態和目標狀態執行相同的後續動作,必須產生相同結果。研究發現,準確的模型式復原可提升端到端表現,而現有智能體尚未善用其潛在復原能力。
研究追蹤七個開源強化學習後訓練框架,發現提出通用訓練方法的 1,598 篇論文中,只有 37 篇獲至少一個框架納入。五個季度羣組中,論文在 180 日內獲納入的數量維持在 5 至 7 篇,儘管各羣組論文數由 72 篇增至 386 篇。研究發布追蹤器,連結訓練失敗與框架實作,並列出各框架的貢獻規則及較早提案。
WORTH Benchmark 評估模型在懸疑故事中自主發現證據及推理的能力,兩集試點顯示線索選取與人物判斷並不同步。Episode 02 的 37 次可評分測試中,31 次選出相同的一組錯誤人物;疑點句與洗脱嫌疑句分別被選取 25 次和 0 次。研究僅涵蓋兩集,未建立穩定的模型排名,也未報告人類與模型的比較。
ProVe 透過微調大型模型,使其一次預測一批未來 token,再以額外一次前向傳播驗證,反轉 speculative decoding 的提議與驗證角色。使用 32B 提議模型時,ProVe-lossless 在六項 benchmark 的平均自回歸生成吞吐量達 2.5 倍,無須訓練獨立 draft head。
StyleStream 2.0 以少步 MeanFlow 模型降低串流語音轉換延遲,並透過統一的 flow matching 模型支援文字語音設計及指令式語音編輯。系統在消費級 GPU 上的端到端延遲為 520 ms,速度較 StyleStream 1.0 快 2 倍,同時維持轉換品質。評測顯示,其目標風格保真度表現突出,在可懂度及非編輯屬性保留方面亦具競爭力。
研究團隊提出由不同學科背景的持續型 AI 研究人員組成團隊,以自主探索線性注意力架構。該團隊在 1.3B 規模的語言建模、常識推理,以及合成和真實世界檢索任務中,表現勝過 GDN2。對照實驗顯示,移除學科背景、個人研究歷史或自適應分配,均會削弱研究成果。
RLSplat 為前饋式 3D Gaussian Splatting 提供可控預算方案,減少 Gaussian 數量時,表示大小、推理延遲和峯值記憶體均按線性幅度下降。它按場景區域分配 Gaussian,並透過局部注意力解碼,直接生成指定數量。在零樣本評估中,即使 Gaussian 數量少 4 倍,RLSplat 仍勝過最強基線;低預算下最快達 4.1 倍,峯值記憶體減少 9.6 倍。
這篇週報整理了 2026-10-12 至 2026-10-19 的 RAG/GraphRAG 動態,聚焦生產環境故障,以及智能體記憶的建構和評估問題。研究涵蓋 10 個 RAG 系統的 654 宗配置故障;FuseRAG 相較最佳 GraphRAG 基線,TTFT 提速 2.2–2.7x,且沒有品質損失。
瑞典國防研究局(FOI)研究人員開發 WiFireNet,透過 Wi-Fi 通道狀態資訊(CSI)識別隱藏手槍。相關論文於 10 月 13 日刊於 arXiv;受控實驗中的平均精確率為 72.5%,若要定位武器在攜帶者身上的具體位置,精確率則降至 53.8%。系統仍處於實驗階段,陌生室內佈局會令識別效果明顯變差;研究團隊計劃採用 Wi-Fi 7、Wi-Fi 8,並已開源程式碼、模型和數據集。
KnowGPO(Knowledge-Grouped Policy Optimization)按搜尋智能體取得的任務相關知識為軌跡步驟分組,據此分配信用。在知識密集型基準測試中,該方法較僅依結果及過程監督的基線高 3.8 至 4.2 分;其 8B 模型表現媲美 32B 開源系統。
HybridAgents結合潛在空間推理與文字互動,讓大語言模型智能體在統一生成流程中切換思考及行動方式,評測表現較前沿大語言模型智能體及智能體框架提升 10.4%。研究在 3 種模型規模、11 項涵蓋數學、科學、醫學、搜尋及智能體推理的基準上評估 HybridAgent。它減少 35.5%-54.7% 的 token 用量,推理速度提升 1.8x-2.6x,成本節省 2.7x-3.7x。
SWIFT 提出一種自我引導訓練方法,利用凍結的弱去噪器外推回歸目標,改善較強擴散模型的訓練,並降低誤差和訓練成本,無須增加推理開銷。在 ImageNet-256 的一種設定中,SWIFT 以約一半總訓練計算量超越基線最佳 FID;在 RAEv2 上,無推理時引導的 FID 為 1.15,有引導時為 0.99。
TokenGate 是輕量、可學習的 token 剪枝模組,透過 token-gated attention 跳過不重要的 token,加快 Transformer 長上下文預填充。
Omni-Woodpecker(OWP)是一個免訓練框架,透過識別跨模態衝突並重平衡隱藏表示,減少全模態大語言模型的跨模態幻覺。以 Qwen2.5-Omni-7B 為骨幹時,OWP 在 CMM 和 AVHBench 分別提升 12.9 和 8.6 分;在四項通用推理基準上提升 0.67-2.25 分。OWP 亦適用於 VideoLLaMA2-AV,在相同基準上分別提升 4.6 和 3.9 分。
RouteWeaver 提出統一 LLM 路由框架,在單一策略中結合路由模式選擇與模式內模型執行。它在數學、編碼、知識、邏輯推理及事實回憶五個領域的平均準確率為 61.4%,較最強基線相對提升 11.03%,並在各領域均勝過對比基線。 ablation 結果顯示,移除漸進式探索會令路由策略完全退化為單輪執行。
SEAM 透過頻譜篩選和嶺迴歸,從已知子詞嵌入初始化未見 token,為低資源 TTS 擴展詞彙。研究涵蓋三種語言和兩種 TTS 架構,使用最多少四倍的訓練數據,仍可接近或達到基準表現;相較隨機初始化和平均池化,樣本複雜度降低 75%。
TCoVP 提出一條時空定位的影片推理鏈,將實體與帶時間戳的視覺證據連結,以改善影片分割的推理和遮罩預測。TCoVP-SFT-15k 和 TCoVP-RL-13k 用於透過監督式微調及推理鏈對齊的強化學習學習此表示方式。在五個 VRS 評測基準和三種模型骨幹上的實驗顯示 TCoVP 表現出色,所有模型和程式碼將公開發布。
ATEST 是一套面向大語言模型推理的資源感知測試時擴展框架,根據新增樣本的預期價值及即時 GPU 成本調整抽樣和停止時機。ATEST-Online 無需離線校準,會在線上學習每步能耗;在 GSM8K 高負載測試中,準確率為 60.0%,沒有延後作答,ATEST-Calibrated 準確率為 44.0%、延後率為 42.4%。
FineSplat提出前饋式 3D Gaussian Splatting 框架,透過細粒度圖像區塊及雙重分組,提升細節幾何與外觀重建。框架結合視角分組與 3D 空間分組促進多視角互動,並以重建誤差提供渲染回饋,配合精簡 Gaussian 生成。在相同或更少的 Gaussian 預算下,FineSplat取得大幅領先現有方法的最先進結果,同時保持高效精簡。
MT Forcing 提出一種基於自回歸擴散的訓練方法,提升統一多模態模型的多輪圖像編輯能力。方法結合單輪分佈匹配蒸餾(Single-Turn DMD)與教師強制引導,分別改善視覺品質和跨輪內容一致性。實驗顯示,這種方法能帶來更穩定的視覺品質及更強的跨輪一致性。
Microsoft 研究團隊分析數萬名內部工程師的使用紀錄,估算採用 AI 編程工具者每日合併的 PR 數量平均增加約 24%。同一工程師使用與未使用工具的星期比較中,Copilot CLI 使用週增加 24.9%,Claude Code 使用週增加 11.4%,但兩組使用者並非隨機分配,不能據此判定工具效能優劣。研究屬觀察性質,PR 數量不直接代表程式碼品質或整體軟件開發生產力。
HumanSkill-4D 是一個無需訓練的框架,透過共享多模態推理和幾何運算子,根據語言查詢選取可動態 Gaussian 化身的區域與動作區間。研究引入三個由人手標註的基準,評估結果顯示,HumanSkill-4D 在部件分割及 3D、4D 指代分割方面優於基線方法。每個化身只需數分鐘設定,並使用精簡記憶。
UniAVC提出統一音訊與影片創作模型,先以大量單模態數據訓練音訊和影片分支,再以稀缺配對數據進行對齊,支援聯合合成、跨模態生成及指令引導編輯。模型採用各自獨立的噪聲排程和非對稱監督,可用同一組權重執行多種創作任務,無需任務專用 adapter。
ECHO 將多視野預測整合至骨幹模型的自遞歸機制,並以動態深度取樣提升預訓練效率及推理草擬能力,毋須輔助模組。預訓練在推理與程式碼任務上提升下游準確度,開銷僅為訓練所有深度的 MTP 一半。推理時,模型可生成超出訓練深度的草稿,並在開放式高熵生成中維持草稿與目標模型的對齊。
LayerEditor 結合指令引導的圖像編輯與可重用 RGBA 圖層生成,讓用戶能精細修改局部內容並重用圖層。它以 In-Context RGB-Alpha Token Modeling 聯合表示編輯後畫布及有序圖層,並透過 Compositional Edit-Prior Distillation 保留編輯能力。研究團隊亦建立 LayerEditor-100K 數據集及分層編輯基準。
CoRE 提出一種無需預設查詢與規則配對監督的結構化知識檢索方法,協同學習為查詢選擇推理規則,以及依規則約束檢索證據。它交替使用強化學習訓練路由策略,並以對比學習訓練檢索器。在 STaRK-QA 的科學發現、生物醫學推理和電子商務知識管理數據集上,實驗顯示 CoRE 有效;分析亦顯示規則使用情況可用於自動改進和發現規則。
EdgeKernelBench 建立統一 IR 部署框架及分層基準,用於評估不同邊緣後端上的 LLM 生成核心,並揭示正確性與效能之間的落差。單次生成中,最佳模型的 Correct@1 為 64.5%,Fast@1.0 僅為 25.5%。分層邊緣核心智能體 LEKA 在評估子集的 Fast@1.0 達 43.5%,高於直接生成的 13.0% 及 Claude Code 的 26.1%。
Jev 1.13 決策模型控制器用於 Claude Sonnet 5.5 終端智能體時,未提升成功率,反而增加每次嘗試成本。在 Terminal-Bench 2.1 的 21 項留出任務、315 次試驗中,Jev 的成本高 19%,通過率則與對照組同為 73.0%。Jev 判斷任務是否完成的平均概率為 0.50,但這些運行中有 87% 通過,顯示其校準不佳,會要求智能體核實已正確完成的工作。