熱點事件持續更新
NLI 與 QA 基準資料完整性普查
1 篇報道1 個報道來源2 小時前更新
先了解這件事
AI 綜述
2026 年 10 月 23 日,DEV Community 報道一項涵蓋十項可重現普查的檢視,調查 NLI 及 QA 基準的標註完整性。SNLI 有 568,404 個唯一樣本,MultiNLI 有 412,222 個;以精確比對或統一空格與大小寫後,兩者均未發現共用樣本。SNLI、MultiNLI 及 ANLI 的重複樣本標註衝突只出現在訓練集,受檢的評估集沒有衝突。其他普查亦檢視 BoolQ、PIQA、CommonsenseQA 及 GSM8K 的重複樣本、資料重疊和標註一致性。
AI 根據報道生成 · 2 小時前更新
最新進展10月23日 07:55
普查發現 SNLI 與 MultiNLI 沒有共用樣本,三個 NLI 資料集的標註衝突只出現在訓練集。報道時間線
沿着報道,瞭解事件的不同側面。
10月23日
- DEV CommunitySNLI 與 MultiNLI 有沒有共用樣本?十項可重現普查檢視 NLI 及 QA 基準的標註完整性
十項可重現普查發現,SNLI 與 MultiNLI 分別有 568,404 個及 412,222 個唯一樣本,經精確比對或統一空格與大小寫後,均沒有共用樣本。SNLI、MultiNLI 和 ANLI 的重複樣本標註衝突只出現在訓練集,所檢查的評估集沒有衝突。其他普查亦檢查了 BoolQ、PIQA、CommonsenseQA 和 GSM8K 的重複樣本、資料重疊及標註一致性。
本事件熱度走勢
當前熱度 9·可比範圍峯值 10(10月23日 08:00)·近 24 小時可比範圍變化 –
趨勢僅比較持續完整觀測到的相同主體,範圍可能小於當前熱度統計。移動指針或點擊圖表查看每小時熱度;鍵盤可用左右方向鍵切換。