AI 公司及 AI 搜尋服務會使用自動程式讀取公開網站內容。這些程式稱為 AI 機器人。您可以選擇讓哪些已知的 AI 機器人讀取您的網站,或將其封鎖。
這是「主動設定」文章;若您只想知道哪些 AI 機器人已曾到訪,請閱讀「AI 機器人造訪紀錄」。
不同 AI 機器人有不同的用途:
封鎖訓練型機器人通常不影響 Google 的一般搜尋結果;但封鎖檢索型機器人,可能導致您的網站不再出現在 ChatGPT、Perplexity、Gemini、Grok 或其他 AI 的回答中。
預設沒有封鎖規則,即代表允許目前已識別的 AI 機器人存取您的公開網站。
若您不希望任何已知的訓練型機器人讀取您的內容,可以關閉訓練型類別。若您關閉檢索型類別,系統會再次提醒您這可能減少 AI 搜尋的曝光。
若您只對特定服務有顧慮,可保留類別開啟,改為關閉個別機器人。例如,您可以只封鎖 GPTBot 或 Google-Extended。
Googlebot、Bingbot 和 Applebot 並不提供封鎖開關,這是為了避免您不小心讓傳統搜尋引擎無法收錄您的網站。若您的網站不應出現在搜尋結果中,應改用「頁面 → SEO」的 noindex 設定,並理解這會影響搜尋曝光。
Kanorio 會用兩層方式處理:
若您改用完全自訂的 Robots.txt,自動 Robots 規則將不會附加,但邊緣層的封鎖仍然會運作。
Kanorio 會自動提供 LLMs.txt 和 LLMs-full.txt。它們就像是給 AI 工具閱讀的網站目錄和完整內容摘要,協助能夠讀取您網站的工具理解品牌和各頁的主題。
這些檔案不會強迫任何 AI 使用或引用您的網站,也不會繞過您所設定的機器人封鎖。您可以在「技術性 SEO」設定中預覽或改為自訂內容。
不會直接影響 Google 的一般搜尋爬蟲。Google 搜尋使用 Googlebot,而訓練或 AI 延伸用途可能使用不同的機器人,例如 Google-Extended。
不能。設定會封鎖 Kanorio 已識別且可封鎖的機器人,但未知、偽裝成一般瀏覽器或不遵守規則的程式仍可能嘗試存取公開內容。
歷史紀錄不會消失。請查看設定後的新紀錄,確認最新的請求顯示為已封鎖。