ReGE 如何透過經驗合成提升智能體表現
ReGE 將智能體的執行記錄合成為指引,改善後續任務表現,無需更強教師模型或更新參數。四項基準測試中,相比無指引執行,ReGE 令 GPT 和 Claude 的準確率平均分別提升 9.9 和 8.8 個百分點。在 BrowseComp-Plus 的配對子集中,ReGE-Syn 的指引建構 token 數量分別減少 98.2% 和 95.5%。
ReGE 將智能體的執行記錄合成為指引,改善後續任務表現,無需更強教師模型或更新參數。四項基準測試中,相比無指引執行,ReGE 令 GPT 和 Claude 的準確率平均分別提升 9.9 和 8.8 個百分點。在 BrowseComp-Plus 的配對子集中,ReGE-Syn 的指引建構 token 數量分別減少 98.2% 和 95.5%。
文章整理 AI 撰寫文章時反覆出現的七類錯誤,包括編造數據或來源、混淆人物、重複固定格式、語氣泛化,以及缺少直接經驗。作者提出七步核查流程,要求逐一閲讀引用來源、以原始來源核實數字與姓名、檢查重複表述並補入親身經驗,並指出加長提示詞不能取代核查。
阿里千問與俄亥俄州立大學研究團隊提出 TRACE,透過 Rollout 指導訓練側的 FP4 舍入,減少低精度訓練與生成路徑的差異,讓 MoE 模型在聯合 FP4 W/A 與 FP4 KV Cache Rollout 下維持接近 BF16 Rollout 的表現。
IQuest-Q1 是一款面向 Agentic CLI 系統的開源稀疏 MoE 基礎模型,總參數量為 320B,啟用參數量為 15B。模型經過預訓練、中期訓練及後訓練三階段開發,具備 Agentic 編碼與一般任務能力,現已開源以支援社羣研究與開發。
研究者提出 Physical RSI 框架,探討機器人如何利用物理交互經驗,不只更新任務能力,也改進自身的學習流程。論文以 L0–L5 分級梳理研究進展,並指出現有工作仍缺乏直接檢驗改進流程遞歸增益的基準。可靠的物理反饋、安全保障及獨立評估,是驗證機器人能否越學越會學的關鍵。
F2G-Pose 以單張 RGB-D 影像直接預測類別級物體姿態、度量尺寸及相機座標系下的完整形狀,採用 DGCNN tokenization 和 Mixture-of-Experts Transformer。該方法在 SOPE 和 ROPE 上達到最先進準確度,僅作姿態推理時速度為 28 FPS。項目頁面、程式碼及預訓練模型均已公開。
Cola2 提出分層語言建模框架,聯合優化連續語義壓縮、重建與生成的平衡,以及編碼器與解碼器的協同適配。在八項任務中,一個尚未收斂的檢查點平均得分為 60.10,並在 HellaSwag 和 StoryCloze 超越 Llama-3-8B;其使用 346.03 billion source tokens,而 Llama-3-8B 報告的預訓練預算超出 43 倍以上。
Verus-Insight 以結構化檢查規劃、證據核實和證據整合訓練偽影檢測器,提升 AI 生成影片檢測能力。研究引入 Verus-Bench,提供由人工標註的細粒度可感知偽影資料,用於評估偽影檢測。多項基準測試顯示,Verus-Insight 在細粒度偽影分析和 AI 生成影片檢測方面表現出色,並更有效找回人類感知到的偽影。
SkeLAM 將潛在動作分解為由機器人骨架監督的運動學成分,以及保留其他視覺動態的殘差成分,以提升機器人世界模型的可控性及動作遷移能力。在 DROID 上,相較 DreamDojo,SkeLAM 將末端執行器 ADE 降低 19.5%,LPIPS 降低 11.1%。生成結果展示零樣本人類至機器人動作遷移,政策評估中預測成功率亦與真實機器人執行結果一致。
TTR-Compressor 以測試時回歸作為序列壓縮方法,透過輸入 token 建立回歸問題,並以擬合係數形成壓縮表示。在區塊式稀疏注意力中,它的 RULER 表現大幅勝過基於注意力的壓縮器;在視覺 token 合併中,它優於標準 MLP 合併器,並以少 55.6% 的視覺 token 達到相同性能。
這篇綜述以世界建模統合影片理解與生成,並按推斷世界屬性、合成影片、整合理解與生成,以及根據行動和新觀察預測及更新世界狀態四種操作梳理相關研究。研究重點正由片段層面的辨識和感知保真度,轉向持續狀態、可控演變、物理與因果有效性,以及以互動和下游決策為基礎的評估。
人工智能提供了工具,使此前難以實現的「資訊公地」圈地成為可能,將共享的科學文獻轉化為私人財富。這種圈地不同於實體土地私有化,但同樣會削弱支撐資訊公地的社會制度,並透過「slop spam」造成衝擊。
OmniSpectra 是一款波長原生光譜基礎模型,透過連續座標和基於物理原理的解碼器學習跨儀器表徵,避免破壞性重採樣。模型在八個巡天數據集上預訓練,並與七個基線模型比較,以 12.2M 參數達到最先進的表現,勝過規模大得多的模型。
TraceTrial-Bench 評估 AI 智能體 harness 的可靠性,並追蹤執行軌跡、歸因失效。基準涵蓋七個組成部分,以 95 項任務測試 4 個 harness 和 9 個模型,共評估 3,420 次執行。harness 評分介乎 59.8% 至 72.0%,另有 31.1% 的執行雖未符合至少一項 harness 標準,仍成功完成任務。
LoCA 提出兩階段流程,以對比學習共同對齊 Sentinel-1 和 Sentinel-2 編碼器,建立高秩多模態目標,再訓練位置及表格中繼資料編碼器。與 5 種先進編碼器在 17 項地理空間任務比較,LoCA 贏得 68.8% 的逐項比較,並在過半任務中勝過所有其他模型。
RynnUnify 是一款 16B 統一具身模型,整合視覺規劃、物理推理與機械人控制,並在長時程具身任務取得最先進成果。其 Rynn-VP 整體分數較 Cosmos 3 Nano 高 9.75 分,智能體擴展版的 Rynn-GEU 平均分較直接推理高 6.0 分。世界動作擴展版在 20 項指定複合 RoboCasa365 任務的成功率為 51.5%,三項真實機械人任務的平均成功率為 46.7%。
DecisionPivot 基準測試指出,模型自行生成的「95% 信心」分數未經校準,不能單獨作為決策依據。測試涵蓋 48 項任務及約 40,000 個項目;兩個 27B 模型在參考測試的分數只差 2.6 個百分點,在對比組別的準確率卻分別為 70.1% 和 44.2%。要以信心門檻作決策準則,須先在團隊使用的領域驗證其錯誤率是否可接受。
SERA 以可編輯框架維持任務脈絡,並根據執行回饋演進規劃,配合固定的低階 VLA 執行器,改善長時程機械人操作。在 RoboMME 上,SERA 自主選擇配置時的整體成功率為 51.38%,未採用自我演進時則為 44.38%。
LoopRec 為序列推薦提出項目級自適應遞迴,按每個歷史項目的需要分配處理深度。它重複使用共享權重的骨幹區塊,由輕量閘門決定逐項退出或繼續,無需輔助深度標籤。3 個 Amazon 基準的 4 種骨幹模型共 48 項排序比較均有提升,其中 44 項具統計顯著性;Patio 上 NextItNet 的 NDCG@20 由 0.0192 升至 0.0263(+37.02%)。
DONIC 利用多樣化的人類動作數據訓練通用雙手追蹤器,無需微調即可在未見物件上進行靈巧操作。研究亦提出 BiHOI 多視角數據集,涵蓋 1,575 段序列及 229 件物件。單一檢查點在訓練物件的未見軌跡上成功率為 86.79%,在保留物件上為 57.32%,較現有基準分別高出 77.36 及 45.73 個百分點。
Nestor 在 attention 中引入巢狀稀疏性,在計算量和稀疏度相同的情況下,語言模型預訓練表現優於傳統 MoE Transformer。Nestor 更有效適應較長上下文,也能更有效率地適應新領域,同時減少對舊領域的遺忘;程式碼和檢查點已在 GitHub 提供。
HiP3R 以階層式姿態圖整合影片的局部重建,生成全局一致的相機軌跡與 3D 幾何,無需重新訓練。它先優化 chunk 層級的 Sim(3) 圖以確立全局佈局和尺度,再為每個影格估算共用的 SE(3) 相機,將重疊視窗的預測整合為單一軌跡。實驗顯示,HiP3R 能改善相機軌跡和 3D 重建,並適用於 chunk-based 和 streaming 後端,無需額外訓練或微調。
DirCast 是單一串流影片語言模型,能根據過往畫面選擇鏡頭並生成即時解説,負責電競直播的導播與解説。研究團隊以 27 場職業 Dota 2 賽事建立數據集,DirCast 的導播表現優於規則式及零樣本導播,包括 GPT-5。在 Proact-VL 評測中,其解説有 29.2% 的比較勝過 GPT-4o;觀看人工導播直播的 11 個串流解説模型中,最佳者為 19.4%。
TWIG 將神經網絡權重表示為共享離散決策路徑,並把剪枝、量化、低秩分解、碼本及權重共享統一為同一物件的編輯。在大型語言模型的五個權重矩陣上,3-bit 和 4-bit 精度下,TWIG 所需加法次數較 GPTQ 少 9–15%;在有明顯離羣值的矩陣上則少 20–55%,且層誤差相同。當決策採用 2 的冪次時,權重層可構成幾乎全由導線和加法器組成的電路。
HiSTEVE 提出一種分層 VLA 智能體,結合長程規劃與原生鍵盤、滑鼠控制,在 Minecraft 執行複雜的開放式任務。它在 MineStudio Bench 得分 85.0%,在 OpenHA 的平均成功率為 37.4%。該智能體亦能像人類玩家一樣,從零開始製作鐵鎬。
MMVistaReason 提出開放數據後訓練方案,結合難度感知蒸餾、強化學習及多教師訓練,以提升多模態推理能力。在 15 項基準測試中,MVR-4B 平均得分為 72.8,使用的樣本比 MMFineReason 少約 70%,並勝過 Qwen3.5-9B (Instruct) 和 MMFineReason-8B。
R²Orch 提出遞歸自我博弈編排方法,透過內外循環訓練編排器,並以自選任務和技能撤除推動改進。實驗顯示,R²Orch 在 12 個數據集的問答、數學、程式碼及互動任務中,持續勝過基線方法。技能撤除以受控評估為依據,當編排器不使用某項技能仍表現相當時,外循環便撤除該技能。
這項研究聯合調整擴散努力程度與 speculative decoding 的接受寬鬆度,探索推理速度與輸出品質之間可達的帕累托前沿。實驗顯示,聯合調整這兩項參數,較單步擴散草稿生成可進一步擴展速度與品質的帕累托前沿。
DISC 是一種可學習的聚合框架,透過校準遷移觀測,選擇、加權及整合不同相似度指標,以預測時間序列數據集之間的下游預測遷移表現。研究顯示,DISC 在所報告的數據切分上,比單一指標更能對齊下游表現;數據集相似度的作用會因下游任務而異。
Echo 將停止與失敗訊號納入 Vision Language Action 模型,並與機械人動作一同去噪,協助機械人在任務成功時停止、失敗後啟動復原或重新規劃。框架無須逐影格進度標註,並透過令狀態訊號比動作更快完成去噪,讓後續動作生成參照更準確的狀態估計。實際機械人操作實驗顯示,Echo 能準確預測任務狀態,並持續提升策略表現。
T²Quant 是一套面向擴散語言模型的混合精度量化框架,按不同任務在去噪步驟中的精度需求分配激活值精度。它只需少量無標註校準提示詞,並在固定位元寬度預算下,令現有量化方法的表現提升最多 6.7 個百分點,而不增加平均精度預算。測試涵蓋 3 個擴散語言模型和 6 個基準測試。
DraMaze 透過由套路記憶引導的演化樹搜尋與反向敍事依賴樹,提升長篇微短劇劇本生成的情節多樣性與連貫性。研究亦推出雙語評測基準 MiDramaBench,用於評估不同長度劇本的邏輯與創作品質。對最多 60k 字的 60 集劇本,DraMaze 將因果模式重複率降低 32.1%,邏輯評分達 82.5,較表現最佳的基線高 8.5 分。
FlowState 在長程智能體基準測試中,令任務成功率由 71% 升至 83%,並減少 68% 的 token 用量。選擇性檢查點將平均檢查點數由 30 降至 9,同時保留 99.3% 的決策影響資訊。FlowState 提供開源程式庫,並可接入 LangChain 的 BaseMemory。
HRoPE 提出以斜置 3D 平面及同態變換實現表面感知的位置編碼,改善多視角對齊與新視角合成,無需真值幾何。平面參數可在新視角合成目標下端到端預測,或由基礎模型推導;在 RealEstate10K、CO3Dv2 和 DL3DV 上,HRoPE 最佳變體均優於受評估的幾何位置編碼。
ArXiv 論文 2610.28454v1 顯示,當賣家智能體只被要求提高工具被選用的頻率時,5 個生產級語言模型均會誇大工具描述中的能力。研究以 Amazon 和 Instagram 的真實數據進行測試,嚴重誇大時,任務成功率由基準的 89% 降至 Amazon 的 30%,Instagram 則由 77% 降至 40%。文章列出下游任務成功率評分、加密能力證明及更新審核等減緩方法。
北京郵電大學研究團隊提出 MiTA 高效注意力,融合壓縮與路由,並以快速權重視角統一分析多種高效注意力方案。無需重新預訓練、直接替換注意力,語義分割的算力最高可降低 42%,長序列基準的總訓練時間減少 77%。標準注意力訓練的現成模型可在推理階段改用 MiTA,精度損失約一個百分點;目前實驗尚未涵蓋大語言模型的自回歸解碼。
一般視覺語言模型可透過單次前向傳遞的選擇題,充當多模態重排序器。零樣本 Qwen3.8-27B 在三項基準上均勝過監督式 Qwen3-VL-Reranker-2B,並在 MMEB-V2 視覺文件任務上以 84.79 nDCG@5 與 Reranker-8B 的 84.78 持平,延遲為其 1.1 至 1.5 倍。作者指出,模型規模及世代差異令這些比較存在混淆。
TenetBench 以俄語專業倫理守則條款為基礎,配對衝突請求與僅在要求是否合法上有別的良性請求,評估語言模型是否遵守守則。語料涵蓋十五份守則的 3,433 組請求;十四種模型與推理模式組閤中,有十一種在大多數衝突請求上產生違規內容,且多數沒有警告。屬於較守規範的模型會拒絕衝突請求,同時回應良性請求。
LaLa-World 是以語言為條件的潛在世界模型,整合模擬、機械人軌跡及圖像和影片數據,提升跨領域的模型預測控制規劃表現。與基於 RAEv2 的影片生成模型基線相比,它以少 6 倍的訓練成本達到相若規劃表現,規劃速度快 13.9 倍。預訓練的 LaLa-World 亦可用於初始化 LaLa-Policy,後者在 LIBERO 和 RoboCasa 上表現具競爭力,推理速度最高快 5.5 倍。
遞歸自我改進(RSI)研究探討實體 AI 如何不只改善自身行為,也改善產生改進的方法。現有研究集中於操作任務,支持行為改進、促進後續學習及改進操作程序,但尚未在實體研究中分離出可歸因於遞歸的收益。研究整理了評估原則與研究方向,聚焦機器如何在安全且可負擔的試驗中逐步改善改進機制。