跳到正文
熱點事件持續更新

系統提示詞日期影響大模型評測

1 篇報道1 個報道來源2 小時前更新

先了解這件事

AI 綜述

一項涵蓋 9 個模型、6 個數據集及四類任務的研究指出,系統提示詞自動加入的當前日期會改變大語言模型的評測表現,並可能重排排行榜。多項選擇題、數學推理及程式碼生成的表現波動最高分別達 6%、14% 及 7%。研究亦發現,GPT-5.1 在 2025 年 12 月一週內,三項多項選擇基準的準確率波動最高達 4%。為確保公平比較,研究建議在可行情況下移除系統提示詞中的日期,或固定並記錄日期。

AI 根據報道生成 · 2 小時前更新

報道時間線

沿着報道,瞭解事件的不同側面。

10月13日
  1. Unite.AI
    研究指出系統提示詞中的隱藏日期會改變大語言模型評測結果

    一項涵蓋 9 個模型、6 個數據集和四類任務的研究發現,系統提示詞自動加入的當前日期會改變大語言模型的評測表現,並可能重排排行榜。多項選擇題、數學推理和程式碼生成的表現波動最高分別達 6%、14% 和 7%;GPT-5.1 在 2025 年 12 月一週內,三項多項選擇基準的準確率波動最高達 4%。研究建議在可行情況下移除系統提示詞中的日期,或固定並記錄日期,以確保公平比較。

本事件熱度走勢

還沒有足夠的連續觀測數據,暫不繪製趨勢。