跳到正文
原文
Ahead of AI· Sebastian Raschka, PhD·· 27 天前精選AI 評分76

GPT-6 Astra、循環式 Transformer 與推理鏈可監控性解析

GPT-6 Astra, Looped Transformers, and Hidden Reasoning

AI 導讀

Sebastian Raschka 分析 GPT-6 Astra 的電腦操作表現與循環式 Transformer 傳聞,指出 Astra 表現突出,但採用該架構尚未獲官方確認。

推薦理由

文章比較循環式 Transformer 的權重共享、計算成本與路由設計,並指出現有資料尚不足以將推理鏈可監控性的變化歸因於這種架構。

來源:Ahead of AI · magazine.sebastianraschka.com