跳到正文
熱點事件持續更新

Zyphra 發佈 Zyda 開放數據集

1 篇報道1 個報道來源6 小時前更新

先了解這件事

報道摘要

Zyphra 公佈 Zyda,一個包含 1.3T tokens、供語言模型訓練使用的開放數據集。它整合七個開放數據集,經統一的品質過濾及跨數據集去重,並以開放且寬鬆的授權發布。消融研究顯示,Zyda 表現勝過 Dolma、Fineweb、Pile、RefinedWeb 和 SlimPajama 等現有開放數據集。

摘自 Zyphra Research

報道時間線

沿着報道,瞭解事件的不同側面。

10月6日
  1. Zyphra Research
    Zyphra 公佈 Zyda:供語言模型使用的 1.3T tokens 開放數據集

    Zyphra 公佈 Zyda,一個包含 1.3T tokens、供語言模型訓練使用的開放數據集。它整合七個開放數據集,經統一的品質過濾及跨數據集去重,並以開放且寬鬆的授權發布。消融研究顯示,Zyda 表現勝過 Dolma、Fineweb、Pile、RefinedWeb 和 SlimPajama 等現有開放數據集。

本事件熱度走勢

還沒有足夠的連續觀測數據,暫不繪製趨勢。