跳到正文
熱點事件持續更新

NLI 與 QA 基準資料完整性普查

1 篇報道1 個報道來源2 小時前更新

先了解這件事

AI 綜述

2026 年 10 月 23 日,DEV Community 報道一項涵蓋十項可重現普查的檢視,調查 NLI 及 QA 基準的標註完整性。SNLI 有 568,404 個唯一樣本,MultiNLI 有 412,222 個;以精確比對或統一空格與大小寫後,兩者均未發現共用樣本。SNLI、MultiNLI 及 ANLI 的重複樣本標註衝突只出現在訓練集,受檢的評估集沒有衝突。其他普查亦檢視 BoolQ、PIQA、CommonsenseQA 及 GSM8K 的重複樣本、資料重疊和標註一致性。

AI 根據報道生成 · 2 小時前更新

報道時間線

沿着報道,瞭解事件的不同側面。

10月23日
  1. DEV Community
    SNLI 與 MultiNLI 有沒有共用樣本?十項可重現普查檢視 NLI 及 QA 基準的標註完整性

    十項可重現普查發現,SNLI 與 MultiNLI 分別有 568,404 個及 412,222 個唯一樣本,經精確比對或統一空格與大小寫後,均沒有共用樣本。SNLI、MultiNLI 和 ANLI 的重複樣本標註衝突只出現在訓練集,所檢查的評估集沒有衝突。其他普查亦檢查了 BoolQ、PIQA、CommonsenseQA 和 GSM8K 的重複樣本、資料重疊及標註一致性。

本事件熱度走勢

當前熱度 9·可比範圍峯值 10(10月23日 08:00)·近 24 小時可比範圍變化 –

02.557.51010月23日08:0010月23日09:0010月23日09:0010月23日10:00

趨勢僅比較持續完整觀測到的相同主體,範圍可能小於當前熱度統計。移動指針或點擊圖表查看每小時熱度;鍵盤可用左右方向鍵切換。