MOSS-Speech:無需文字引導的端到端語音對語音模型
MOSS-Speech 實現無需文字引導的端到端語音對語音互動,可直接生成語音而毋須先產生文字。模型以 Qwen3-8B 為基礎,採用模態分層架構及凍結式預訓練策略,在擴展語音模態時保留 LLM 能力。程式碼採用 Apache 2.0 授權;MOSS-Speech-Base 則列為後續發布項目。
MOSS-Speech 實現無需文字引導的端到端語音對語音互動,可直接生成語音而毋須先產生文字。模型以 Qwen3-8B 為基礎,採用模態分層架構及凍結式預訓練策略,在擴展語音模態時保留 LLM 能力。程式碼採用 Apache 2.0 授權;MOSS-Speech-Base 則列為後續發布項目。
FAST 是一套通用人形機械人全身控制框架,可零樣本追蹤高動態動作並即時遙距操控,在模擬環境以外維持穩健性與平衡。框架採用 Mixture-of-Experts 架構及 CoM-Aware 控制,並以 Parseval-guided residual policy learning,為低質素或分佈外的動作參考進行輕量化快速適應。
研究團隊系統研究異質機械人數據下 VLA 模型的規模化,發現 EEF-Relative 動作表示有助跨機械人遷移,而直接混合異質數據往往造成負遷移。
Kimi 團隊推出 WorldVQA,用以評估多模態大語言模型對視覺世界知識的事實掌握程度。基準包含 3,500 組圖像問答,涵蓋 9 個類別,並區分常見與罕見知識;前沿模型在長尾視覺知識上的準確率往往低於 50%。團隊將開放 WorldVQA 數據集及評估程式。
UniTacHand 將感測手套與靈巧機械手的觸覺訊號映射至 MANO 的統一 2D 手部空間,以支援人手技能遷移。在人手數據加一次示範的操作任務比較中,UniTacHand 的成功率為 73.3%,高於 UV-Direct 的 63.3%;混合人手與機械人數據協同訓練亦展示零樣本觸覺策略遷移及更高數據效率。
Answer.AI 研究人員建立並公開 ReadBench,比較視覺語言模型在文字輸入與文字圖像輸入下讀取、推理及抽取資訊的表現。測試顯示,幾乎所有模型在多模態輸入下表現都有所下降;短於一頁的輸入退化較輕,長文本則顯著退化,研究指出目前將多頁文件直接交給 Visual RAG 尚不可行。
OmniAudio 是一款由 360 度影片生成沉浸式空間音訊的模型,並已獲 ICML 2025 接收。項目已公開推理程式碼、預訓練模型權重及 Sphere360 數據集。Sphere360 收錄超過 103,000 段 10 秒配對影片及 FOA 4 聲道音訊,總計 288 小時。
Being-0 是一套結合視覺語言模型與模組化技能的分層智能體系統,可讓全尺寸人形機械人執行複雜的長時程任務。系統由雲端 Foundation Model、機載 Connector 和機載模組化技能庫組成;Connector 將高層語言計劃轉為可執行的技能指令,並協調移動與操作。
BigCodeBench 團隊發布 BigCodeBench 程式碼生成基準,收錄1,140項函式級任務,涵蓋139個程式庫。基準分為 BigCodeBench-Complete 和 BigCodeBench-Instruct;GPT-4o 的 calibrated Pass@1 分別為61.1%和51.1%。團隊開源任務、測試案例、評測框架及排行榜,並提供 PyPI 安裝方式。
HalluQA 是一個中文大語言模型幻覺問答基準,提供 450 條精心設計的對抗式問題、數據及評測腳本。評測以非幻覺率為指標,並使用 GPT-4 判斷模型回答是否出現幻覺。基準亦提供多項選擇任務及相應評測腳本。
作者團隊推出 SGLang,這套 LLM 編程及推理系統以 RadixAttention 自動重用多次生成呼叫間的 KV cache。在 Llama-7B 和 Mixtral-8x7B 的多項基準測試中,SGLang 相較 Guidance、vLLM 等基線系統,吞吐量最高為基線系統的 5 倍,首 token 延遲亦有所改善。