
據 Cloudflare Radar 於 6 月 4 日收集的即時數據顯示,全球 HTTP 流量中 34.1% 來自機器人,65.9% 來自真人;Cloudflare 統計指出,自動化流量的成長速度約為人類流量的 8 倍。AI 爬蟲在所有機器人流量中約占 22%,是僅次於搜尋引擎爬蟲的第二大類別。
AI 爬蟲市占分布:Meta-ExternalAgent 超越 GPTBot
(來源:Cloudflare Radar)
Cloudflare 數據中各主要 AI 爬蟲的占比:
Meta-ExternalAgent:約 16.3%,已超越 GPTBot 排名第一
ClaudeBot:約 11.6%
Applebot:單月激增 140%,從約 2.97% 跳升至 7.15%,Cloudflare 將此定性為 Apple Intelligence 加大資料抓取力道的訊號
GPTBot:已被 Meta-ExternalAgent 超越(具體占比浮動)
Cloudflare 說明,不同報告數字會有浮動,以上數據應視為趨勢方向,而非精確排名。
登入嘗試與整體流量結構
Cloudflare 數據顯示,網站登入嘗試中 94% 來自機器人。行動裝置占全球流量 55.4%,桌機占 44.6%。Cloudflare 說明,34.1% 的機器人流量並不等同於惡意流量,其中涵蓋搜尋引擎蜘蛛、網路監控工具、API 整合服務,以及 AI 爬蟲等多種類型。AI 爬蟲中,訓練型爬蟲(即抓取資料用於長期模型訓練)占逾 51.5%,其餘為即時型爬蟲(用於即時回答用戶查詢)。
常見問題
Cloudflare 統計的 34.1% 機器人流量包含哪些類型?
根據 Cloudflare Radar 數據,34.1% 的機器人流量涵蓋搜尋引擎爬蟲、AI 訓練爬蟲、網路監控工具、API 整合服務及惡意攻擊程式等多種類型。AI 爬蟲約占機器人流量的 22%,是第二大類別。
Applebot 單月增長 140% 代表什麼?
Cloudflare 數據顯示,Applebot 在單月內從約 2.97% 增加至 7.15%,增幅達 140%。Cloudflare 將此定性為 Apple Intelligence 加大網頁資料抓取力道的訊號。
Cloudflare CEO Matthew Prince 的 2027 年預測是確認的事實嗎?
否。Matthew Prince 的「機器人流量在 2027 年超越真人」是個人公開預測,Cloudflare 原文中明確說明「這是預測,不是已成事實」。目前確認的數據是 34.1% 的機器人流量占比,以及自動化流量增速約為人類流量的 8 倍。