馬斯克就可以起訴他發現的任何爬蟲。有這條協議打底後,明確禁止出於任何目的的以任何形式的抓取或抓取服務。
在馬斯克接管 X 後,取而代之的就是未經書麵同意任何抓取都是違規行為。後麵改成可以通過具體推文鏈接訪問單條推文)。
是否與穀歌續簽協議還是未知數:
盡管此前 X 修改限製時也誤傷穀歌,允許穀歌抓取 Twitter 平台的內容。並非法律協議,不過馬斯克顯然是在殺雞儆猴。Yandex 等搜索引擎爬蟲。包括諸如 Bing、所以很難說後麵 X 是否也會限製穀歌抓取。
![]()
新的抓取限製條款:
X 此前已經更新 robots.txt 文件,
而未登錄情況下隻能瀏覽推特算法推薦內容,阻止除穀歌爬蟲 (GoogleBot) 以外的一切爬蟲,任何未經 X 書麵同意的情況下,這既是用來防範某些開發者不通過申請付費 API 而是注冊一大批賬號進行抓取,以任何形式、取而代之的時:注意:未經我們事先書麵同意,
而在 2023 年 9 月 29 日生效的新條款中刪除了關於 robots.txt 的描述,出於任何目的、可能當前繼續保留穀歌抓取也隻是礙於協議,X 對平台內容的獲取限製日趨嚴厲,導致穀歌搜索無法抓取 X 平台內容,但很快 X 就修複了這個問題,如果要想抓取 X 內容那開通 API 費用會非常高。
但 robots.txt 畢竟隻是行業約定俗稱的爬取規範,
也是為了刺激更多 X 用戶開通 X Premium 訂閱會員。抓取 X 平台任何內容均屬於違反 X 的使用協議,所以現在 X 刪除關於 robots.txt 進行合法抓取的描述,例如此前 X 就變更開發者政策,在埃隆馬斯克帶領下,但是,未經我們實現同意就抓取是明確禁止的。目前 X 正在繼續施加更多限製,盡管目前還不知道有沒有查到這些 IP 的所有者,
此前條款中是這麽要求的:注意:如果按照 robots.txt 文件的規定進行抓取服務時允許的。不能限製穀歌抓取。畢竟 Twitter 在 2015 年與穀歌達成過協議,刪除免費 API 接口,
如果協議即將到期馬斯克大概率是不會續簽的,
同時 X 還對免費用戶每天可以看的推文數量進行限製,無法查看用戶主頁瀏覽全部推文 (一開始的限製是未登錄禁止瀏覽任何推文,
此前 X 已經在美國起訴四個 IP 所有者非法抓取 X 平台的內容,因為其他爬蟲還可以爬穀歌來獲取 X 平台的內容,
不過這其實是一個 BUG,



