如何建立開放域問答系統?
Lilian Weng 系統梳理開放域問答系統的常見建構方式,涵蓋外部知識檢索與閲讀、檢索後生成,以及不依賴外部資料的閉卷問答。文章比較 DrQA、ORQA、REALM、DPR、RAG、T5 和 GPT3 等方案,並指出部分公開 QA 數據集存在訓練與測試資料重疊:58–71% 的測試答案曾出現在訓練集,28–34% 的測試問題在相應訓練集中有近似重述。
Lilian Weng 系統梳理開放域問答系統的常見建構方式,涵蓋外部知識檢索與閲讀、檢索後生成,以及不依賴外部資料的閉卷問答。文章比較 DrQA、ORQA、REALM、DPR、RAG、T5 和 GPT3 等方案,並指出部分公開 QA 數據集存在訓練與測試資料重疊:58–71% 的測試答案曾出現在訓練集,28–34% 的測試問題在相應訓練集中有近似重述。