15+ 種 AI 爬蟲辨識
自動辨識 GPTBot、ClaudeBot、PerplexityBot、Google-Extended 等所有主流 AI 爬蟲,區分訓練型與即時抓取型。
自動辨識 GPTBot、ClaudeBot、PerplexityBot、Google-Extended 等所有主流 AI 爬蟲,區分訓練型與即時抓取型。
哪些頁面被 AI 爬蟲造訪最多次?依爬蟲類型分組,找出最受 AI 重視的內容頁。
每日 / 每週爬蟲造訪量折線圖,看見 AI 抓取行為的週期規律與異常波動。
連結 Google Analytics 4,將爬蟲行為與真實 AI referral 流量並排比對,驗證「被抓到 → 真的帶流量」的轉化路徑。
AI 爬蟲的造訪不會出現在 GA4 的用戶數裡。你需要專門的 server log 分析層,才能看見這一整層被忽略的流量。
不同 AI 爬蟲對應不同用途:GPTBot 用於訓練、ChatGPT-User 用於即時答覆、PerplexityBot 直接影響 Perplexity 搜尋結果。辨識清楚才能對症下藥 — 訓練型爬蟲代表長期語料影響,即時抓取型爬蟲代表近期答覆可見度。
每隻爬蟲的造訪週期都不同:GPTBot 可能每幾週大規模掃一次,PerplexityBot 可能近乎每天都在抓取熱門頁面。時間趨勢圖讓你看見週期模式,確認內容更新後是否在下次抓取前上線。
造訪次數排名前 10 的頁面往往就是 AI 引用你內容的來源頁。加強這些頁面的 schema 標記、FAQ 區塊、結構化資料,可以大幅提升被引用的機率與質量。
連結 GA4 後,可以對照「某頁被大量抓取」與「該頁 AI referral session 數」的時間相關性,驗證你的內容優化是否真的轉化成可見的 AI 流量,而不是被抓走卻從未出現在答覆裡。
ChatGPT讓答案裡有你的品牌從免費 GEO 健檢開始 — 看 8 大 AI 引擎現在怎麼描述你,以及該先修哪些。