本報告採用「爬取/引薦比例」(Crawl-to-Refer ratio),即每次引薦所對應的爬取頁數,用以審視由 2024 年 7 月至 2025 年底的變化。數據來自 Cloudflare 2025 年 8 月的研究及 SearchSignal 2026 年 2 月的基準報告;Tow Center 的記錄因連結重複而剔除。
研究背景
AI 爬蟲可能服務於模型訓練、搜尋索引或用戶請求觸發等目的——這些情況本身並不等同於用戶點擊來源連結。
此比例是將爬取頁數除以引薦次數計算得出。比例上升表示每次回訪的機器讀取次數增加,但這並不能解釋引用或轉換成效。
訓練爬取佔比持續上升,擴大機器人與用戶流量之間的差距
根據Cloudflare 2025 年 8 月研究,訓練爬取的佔比由 2024 年 7 月的 72% 上升至 2025 年 7 月的 79%,過去六個月平均為 82%;同期,與搜尋相關的爬取由 26% 降至 17%,而用戶操作觸發的爬取則由 2% 增至 3.2%。
新增爬取活動中有相當部分服務於訓練目的,而非將用戶帶回網站。若只觀察機器人請求數量,很容易將「被機器造訪」與「被用戶發現」混為一談。
爬取/引薦比例顯示 AI 平台的讀取量遠高於其引薦量
在 Cloudflare 的固定樣本中,Anthropic 於 2025 年 7 月錄得每次引薦對應 38,065.7 次爬取;Perplexity 由 1 月的 54.6 上升至 7 月的 194.8,增幅達 256.7%。同期,OpenAI 錄得 1,091.4,Google 則為 5.4。
SearchSignal 2026 基準報告按產品名稱彙總這些數字,分別為 Google 5.4、ChatGPT 1,091 及 Claude 38,066。此部分源自同一 Cloudflare 樣本期;表格中同時保留兩種命名方式,以避免重複計算或排名差異。
| 渠道或平台 | 報告期 | 每次引薦的爬取次數 | 數據來源 | 方法說明 |
|---|---|---|---|---|
| 2025 年 7 月 | 5.4 | SearchSignal | 彙總自 Cloudflare | |
| ChatGPT | 2025 年 7 月 | 約 1,091 | SearchSignal | 對應 OpenAI 方法 |
| Claude | 2025 年 7 月 | 約 38,066 | SearchSignal | 對應 Anthropic 方法 |
| Anthropic | 2025 年 7 月 | 38,065.7 | Cloudflare | 不會與 Claude 重複計算 |
| Perplexity | 2025 年 7 月 | 194.8 | Cloudflare | 1 月至 7 月增長 +256.7% |
AI 答案可以直接滿足部分用戶需求,意味著用戶可能不會開啟來源頁面。AI 爬取量反映內容被機器讀取的頻率,而引薦流量則反映用戶是否回流至網站——兩者並非同一條增長曲線。
AI 引薦流量增長迅速,但佔比仍然有限
SearchSignal 彙整 Similarweb、BrightEdge 及 Digiday 於 2024 至 2025 年的研究,指出 AI 引薦流量按年增長 357%;然而,Conductor、SE Ranking 及 Ahrefs 的樣本顯示,AI 引薦約佔網站總流量的 0.1% 至 1.08%。由於樣本及歸因規則存在差異,這些區間不應合併為單一市場平均值。
Conductor 樣本涵蓋 13,770 個域名及 33 億次工作階段;由 2025 年 5 月至 9 月,AI 引薦佔 IT 及科技網站流量的 2.8%。高增長並不代表 AI 已成為所有行業的主要流量來源。
趨勢觀察:爬取、引用與訪問需分層量度
Cloudflare 的跨地區新聞樣本顯示,Google 的引薦流量於 2025 年 3 月較 1 月下降 9%,2025 年 4 月則下降 15%。時間上大致與 Gemini 2.0 更新及 AI Overviews 擴展吻合,但不能由此相關性推斷因果關係。
爬取、引用、品牌提及、引薦訪問及轉換代表不同階段,不會自然以相同速率增長。
研究啟示
企業可記錄爬蟲代理、目的及頁面類型;監測 ChatGPT、Gemini、Google AI Mode、Perplexity 及 Google AI Overview 中的引用或品牌提及;並為可識別的 AI 引薦訪問單獨標記。
結合 GEO 審計、Schema 檢查、成效監測及趨勢分析,可以觀察「被爬取 → 被理解 → 被引用 → 被訪問」的完整路徑。
當 AI 爬取、品牌提及與引薦流量出現不同步時,請逐步審視您的數據方法。aipogeo 讓您在一分鐘內檢查品牌在 6 大主流 AI 引擎中的真實能見度。
相關問題
為什麼 AI 爬蟲造訪網站內容卻未能產生更多引薦流量?
部分爬取服務於訓練或索引目的,並非由用戶請求觸發;AI 答案亦可能直接滿足用戶需求。
什麼是爬取/引薦比例?
它代表每次網站引薦所對應的爬取頁數,並不直接反映引用質量或轉換成效。
ChatGPT、Claude 及 Perplexity 的爬取/引薦比例有何分別?
在 Cloudflare 2025 年 7 月的樣本中,有關數字分別為 1,091.4、38,065.7 及 194.8——應在同一時間框架內解讀。
網站被 AI 機器人頻繁爬取後,應追蹤哪些指標?
應聚焦於爬取目的、引用、品牌提及、引薦訪問及轉換,以準確掌握每個層面的變化。