跳到正文
熱點事件持續更新

HuggingFace exact_match 正規化選項現匹配問題

1 篇報道1 個報道來源3 小時前更新

先了解這件事

AI 綜述

2026 年 10 月 18 日,DEV Community 報道指出,HuggingFace evaluate 的 exact_match 指標提供四個正規化選項,但這些選項可能令不同答案被判定為匹配,也可能令看似相同的答案未能匹配。作者建立包含 13 個案例的語料庫,並以標準庫測試重現相關情況;測試對照固定在 upstream commit a5db2ad。案例涵蓋 ASCII 標點及數字刪除、正則表達式,以及處理順序所涉及的邊界情況。報道呈現正規化選項可能造成的誤匹配與漏匹配,以及作者以案例和測試重現問題的做法。

AI 根據報道生成 · 2 小時前更新

報道時間線

沿着報道,瞭解事件的不同側面。

10月18日
  1. DEV Community
    HuggingFace evaluate 的 exact_match 正規化選項可能誤造匹配,也會漏掉真實匹配

    HuggingFace evaluate 的 exact_match 指標提供四個正規化選項,可能把不同答案判作匹配,也可能令看似相同的答案無法匹配。作者建立了包含 13 個案例的語料庫,以標準庫測試重現,並固定對照 upstream commit a5db2ad;案例涵蓋 ASCII 標點及數字刪除、正則表達式和處理順序帶來的邊界情況。

本事件熱度走勢

當前熱度 9·可比範圍峯值 10(10月18日 22:00)·近 24 小時可比範圍變化 –

02.557.51010月18日22:0010月18日23:0010月18日23:0010月19日00:00

趨勢僅比較持續完整觀測到的相同主體,範圍可能小於當前熱度統計。移動指針或點擊圖表查看每小時熱度;鍵盤可用左右方向鍵切換。