熱點事件持續更新
系統提示詞日期影響大模型評測
1 篇報道1 個報道來源2 小時前更新
先了解這件事
AI 綜述
一項涵蓋 9 個模型、6 個數據集及四類任務的研究指出,系統提示詞自動加入的當前日期會改變大語言模型的評測表現,並可能重排排行榜。多項選擇題、數學推理及程式碼生成的表現波動最高分別達 6%、14% 及 7%。研究亦發現,GPT-5.1 在 2025 年 12 月一週內,三項多項選擇基準的準確率波動最高達 4%。為確保公平比較,研究建議在可行情況下移除系統提示詞中的日期,或固定並記錄日期。
AI 根據報道生成 · 2 小時前更新
最新進展10月13日 00:26
研究建議移除系統提示詞中的日期,或固定並記錄日期,以確保評測公平。報道時間線
沿着報道,瞭解事件的不同側面。
10月13日
- Unite.AI研究指出系統提示詞中的隱藏日期會改變大語言模型評測結果
一項涵蓋 9 個模型、6 個數據集和四類任務的研究發現,系統提示詞自動加入的當前日期會改變大語言模型的評測表現,並可能重排排行榜。多項選擇題、數學推理和程式碼生成的表現波動最高分別達 6%、14% 和 7%;GPT-5.1 在 2025 年 12 月一週內,三項多項選擇基準的準確率波動最高達 4%。研究建議在可行情況下移除系統提示詞中的日期,或固定並記錄日期,以確保公平比較。
本事件熱度走勢
還沒有足夠的連續觀測數據,暫不繪製趨勢。