← 回 Blog

AI 爬蟲來過,不代表 AI 會引用你|選 AEO 服務前該問的 3 個問題

AI 爬蟲來抓你的網站,不等於 AI 回答時會引用你。用官方文件說清楚抓取和引用的差別,再整理 3 個選 AEO 服務前一定要問的問題。

越來越多客人直接問 ChatGPT、Perplexity 或 Google 的 AI 摘要「哪家店比較推薦」。所以市面上出現很多 AEO(答案引擎優化)服務,有些會給你一個漂亮的分數,告訴你「AI 來看過你很多次」。

先講結論:AI 爬蟲來過,只代表你的頁面被讀取過,不代表 AI 回答時會提到你、引用你。 下面用各家的官方文件,把這件事講清楚。

抓取 ≠ 引用

把它想成投履歷:人資「收到」你的履歷,跟你「被錄取」,是兩件事。

Google 官方說明,網頁要出現在 AI 摘要(AI Overviews)或 AI 模式裡當參考連結,必須先被收錄、可以在搜尋結果顯示摘要,但符合條件也不保證一定會被收錄或顯示。也就是說,被抓取只是門票,不是保證。

訓練用爬蟲和搜尋用爬蟲,不一樣

很多報表把所有 AI 爬蟲的造訪次數加在一起,這很容易讓人誤會。

  • OpenAI 的官方文件把兩種爬蟲分開:OAI-SearchBot 是讓網站出現在 ChatGPT 搜尋結果用的;GPTBot 是蒐集可能用來訓練模型的內容。兩者的設定互相獨立。
  • Perplexity 也說明,PerplexityBot 是用來在搜尋結果中呈現、連結網站,不用來蒐集訓練基礎模型的資料。

所以「訓練型爬蟲來了很多次」,跟「AI 回答時會引用你」沒有直接關係。

權威應該放在你自己的網站

Google 說得很直接:要出現在 AI 功能裡,沒有額外的技術要求,也不需要特別優化;不需要建立新的機器可讀檔案、AI 文字檔或特殊的 schema 結構化資料。重點還是 SEO 基本功:允許爬取、內容以文字呈現、結構化資料和頁面上看得到的內容一致、商家資訊保持最新。

至於常被拿來推銷的 llms.txt,目前只是一份社群提案,不是各家引擎共同承認的標準;而 Google 也已經說明不需要另做 AI 文字檔。

如果把你的介紹放在別人的網域上,就算被抓了,累積的也是那個網域的信用,不是你的。這也是我們做數位軌跡服務時,堅持把基礎建在你自己官網和 Google 商家的原因。

選 AEO 服務前,該問的 3 個問題

  1. 分數怎麼算? 是廠商自訂的分數,還是來自 Google、OpenAI 等平台的官方數據?有沒有把訓練型爬蟲和搜尋型爬蟲混在一起算?
  2. 證據能不能重現? 「AI 有提到你」要附上哪個 AI、哪一天、問了什麼問題、原始回答截圖。你自己再問一次,能不能看到類似的結果?
  3. 頁面放在誰的網域? 優化的是你自己的官網,還是放在廠商的網站上?哪天不續約,這些東西還在不在你手上?

自我檢查清單

  • robots.txt 和 CDN/防火牆沒有擋 Googlebot、OAI-SearchBot、PerplexityBot
  • 網站已加入 Google Search Console
  • 重要資訊以文字呈現,不只放在圖片裡
  • 結構化資料和頁面內容一致
  • 店名、地址、電話在官網和 Google 商家檔案一致

Kairos 怎麼做

  • 看 AI 真的怎麼回答:實際向各個 AI 提問,保留問題、時間、原始回答和截圖,報告寫成「問了幾次、出現幾次」。
  • 優化你自己的網站:所有改善都做在你的官網上,成果留在你名下。
  • 公開方法和樣本數:樣本不夠就直接說不夠,不用自訂分數假裝是官方指標。
  • 不保證排名,也不保證一定被引用:平台官方本身就沒有提供這種保證。

費用依網站狀況而定,歡迎來信諮詢,或直接填寫需求表單,諮詢後報價。想先看看自己網站的狀況,可以用 K-Core 免費健檢。

常見問題

Q:AI 爬蟲來我網站很多次,代表會被推薦嗎? A:不一定。被抓取只是前提,Google 也說明符合條件不保證會被顯示。而且很多是訓練用的爬蟲,跟回答時引用誰沒有直接關係。

Q:一定要做 llms.txt 或特殊結構化資料嗎? A:以 Google 為例,官方說明不需要額外的 AI 文字檔或特殊 schema。把 SEO 基本功做好更實際。

Q:要擋掉 GPTBot 嗎?會影響 ChatGPT 搜尋嗎? A:OpenAI 說明 GPTBot 和 OAI-SearchBot 的設定互相獨立。如果你不想被拿去訓練、但想出現在 ChatGPT 搜尋,可以擋 GPTBot、允許 OAI-SearchBot。

Q:有人保證讓 AI 引用我,可信嗎? A:就各平台公開的官方文件來看,沒有提供保證引用的管道。看到保證,先問清楚證據怎麼來、能不能重現。

參考資料