跳到正文
熱點事件持續更新

Alba LM 審查網站 robots.txt 設定

1 篇報道1 個報道來源55 分鐘前更新

先了解這件事

AI 綜述

2026年11月6日,Alba LM 公佈使用 PageSignal 審查網站首頁的結果,檢視網站 robots.txt 對 AI 爬蟲的設定。報道標題稱檢查31個網站,內文則稱審查40個網站首頁,其中31個結果可用;標題亦指出,Alba LM 發現自家工具解析錯誤,但未交代錯誤細節。分類結果顯示,6間新聞網站均封鎖至少一種 AI 搜尋或助理爬蟲;10間 SaaS 及開發工具公司則沒有封鎖相關爬蟲。報道未提供其餘網站的分類結果,也未列出工具的修正情況。

AI 根據報道生成 · 50 分鐘前更新

報道時間線

沿着報道,瞭解事件的不同側面。

11月6日
  1. DEV Community
    Alba LM 檢查 31 個網站對 AI 爬蟲的 robots.txt 設定,發現自家工具解析錯誤

    Alba LM 用 PageSignal 審查 40 個網站首頁,31 個結果可用;6 間新聞網站均封鎖至少一種 AI 搜尋或助理爬蟲,10 間 SaaS 及開發工具公司則沒有。

本事件熱度走勢

還沒有足夠的連續觀測數據,暫不繪製趨勢。