熱點事件持續更新
Atalaya AI 提出分流封鎖 AI 爬蟲規則
1 篇報道1 個報道來源2 小時前更新
先了解這件事
AI 綜述
Atalaya AI 提供一套 robots.txt 規則,將 AI 訓練爬蟲和 AI 搜尋爬蟲分開處理,做法是封鎖前者並允許其他爬蟲存取。2026 年 10 月,該公司抽查墨西哥、美國和加拿大共 900 個網域,當中 751 個結果可用。報道指出,在至少封鎖一種 AI 訓練爬蟲的網站中,同時封鎖至少一種 AI 搜尋爬蟲的比例,按墨西哥、美國、加拿大次序分別為 59%、64% 和 47%。這篇報道呈現了抽查所見的兩類爬蟲封鎖情況,以及 Atalaya AI 提供的分流規則。
AI 根據報道生成 · 1 小時前更新
報道時間線
沿着報道,瞭解事件的不同側面。
10月22日
- DEV Community如何用 robots.txt 封鎖 AI 訓練爬蟲,同時保留 AI 搜尋可見度
Atalaya AI 提供一套 robots.txt 規則,將 AI 訓練爬蟲與 AI 搜尋爬蟲分開處理,封鎖前者並允許其他爬蟲存取。其於 2026 年 10 月抽查墨西哥、美國和加拿大的 900 個網域,其中 751 個結果可用;在至少封鎖一種訓練爬蟲的網站中,同時封鎖至少一種 AI 搜尋爬蟲的比例分別為 59%、64% 和 47%。
本事件熱度走勢
還沒有足夠的連續觀測數據,暫不繪製趨勢。