ChatGPT, Claude, Perplexity 또는 Google AI 검색에서 잠재 고객이 귀하의 산업과 관련된 질문을 하면, 이러한 AI 서비스가 보낸 AI 크롤러/봇이 귀하의 공개 웹사이트를 방문하여 콘텐츠를 읽습니다.
AI 봇은 일반 방문자와 달리 프론트엔드 JavaScript 추적 코드를 실행하지 않기 때문에, Kanorio는 전용 서버 측 추적 파이프라인을 구축했습니다. 이 파이프라인은 알려진 모든 AI 및 검색 크롤러 액세스 로그를 "분석 › AI 봇" 탭에 표시합니다. 이를 통해 일반 방문자 트래픽 데이터의 정확성을 유지하면서, 어떤 콘텐츠가 AI에 의해 가장 자주 인용되는지 명확하게 파악할 수 있습니다!
ChatGPT나 Gemini에서 발생하는 "일반 방문자"의 클릭을 추적하거나 봇 차단 규칙을 조정하고 싶으신가요?
- 이 페이지는 "웹사이트를 방문하는 AI 자동 크롤러"에 대해 다룹니다. "ChatGPT, Google Gemini 또는 Claude 응답 내의 인용 링크를 클릭하여 사이트에 도달한 일반 방문자"에 대한 통계를 보려면, "분석 › 개요"로 이동하여 트래픽 소스를 "AI 어시스턴트"로 전환하십시오(트래픽 소스, AI 어시스턴트 추천 및 UTM 추적 참조).
- AI 검색 인용률(AEO/GEO)을 개선하거나 "학습 차단, 검색 허용" 전략을 설정하는 방법을 알아보려면 AI 검색 최적화 및 봇 관리를 참조하십시오.
"분석 › AI 봇"을 엽니다. 상단의 4개 카드는 선택한 기간의 총계와 이전 기간 대비 변화율을 표시합니다:
| 지표 카드 | 의미 | 핵심 요약 |
|---|---|---|
| 총 방문 수 | 공개된 웹사이트 페이지를 읽어가는 알려진 AI 및 검색 엔진 봇의 총 요청 수 (사용자 트래픽 제외). | 웹사이트 콘텐츠가 주요 AI 및 검색 엔진에 의해 지속적으로 인덱싱되고 업데이트되는지 확인합니다. |
| 차단됨 | "차단 규칙"에서 차단하도록 설정한 봇의 요청 수 또는 403 Forbidden 상태로 웹사이트에서 거부된 요청 수. | 이 카드를 클릭하면 "AI 봇 차단 규칙" 패널이 열립니다. 차단된 요청도 여기에 기록되므로 방화벽이 콘텐츠를 성공적으로 보호하고 있음을 증명합니다! |
| IP 인증됨 | 소스 IP가 AI 운영자가 공개한 공식 서버 IP 범위와 일치하는 요청 수. | OpenAI, Google, Anthropic, Perplexity, Apple, Meta, Microsoft와 같은 공식 소스에서 온 인증된 봇입니다. |
| 스푸핑 의심 | User-Agent는 유명한 AI 봇을 사칭하지만 소스 IP가 공개된 공식 범위와 일치하지 않는 요청 수. | 제3자 크롤러가 GPTBot 또는 Googlebot을 사칭하여 페이지를 스크래핑할 때 흔히 나타납니다. |
보고서의 순위와 막대 차트는 OpenAI, Anthropic(Claude), Google, Perplexity, Meta, Apple, Microsoft(Bing), Amazon, xAI, Mistral, Cohere, DuckDuckGo, ByteDance, You.com, Common Crawl, Diffbot, AI2, iAsk 등 18개 운영자의 35가지 봇을 공개된 사용 사례에 따라 세 가지 범주로 분류합니다:
ChatGPT-User, OAI-SearchBot, PerplexityBot, Claude-SearchBot, DuckAssistBot 등이 있습니다. 사용자가 AI 채팅 인터페이스에서 질문하면, 이 봇들은 귀하의 페이지를 실시간으로 읽고 귀하의 사이트 링크를 포함합니다. 무료 AI 검색 노출을 보장하기 위해 이 봇들은 "허용" 상태로 두는 것을 권장합니다.GPTBot, ClaudeBot, Google-Extended, Meta-ExternalAgent, CCBot 등이 있습니다. 이 봇들은 차세대 AI 모델을 학습시키기 위해 콘텐츠를 읽으며, 응답에 귀하의 URL을 포함하지 않을 수 있습니다. 원본 콘텐츠 저작권을 우선시한다면 언제든지 학습 봇을 "차단"으로 설정할 수 있습니다.Googlebot, Bingbot, Applebot 등이 있습니다. 이 봇들은 귀하의 사이트가 Google 및 Bing 검색 결과에 나타나도록 합니다. (이는 사이트 가시성에 매우 중요하며, 시스템은 기본적으로 이 봇들을 보호합니다. 사이트 전체 인덱싱을 비활성화하려면 "SEO › 설정"으로 이동하십시오).인터넷상의 모든 프로그램은 User-Agent를 GPTBot으로 변경할 수 있습니다. 가짜 크롤러가 데이터를 왜곡하는 것을 방지하기 위해, Kanorio는 서버 측에서 공식 공개 IP 목록(CIDR 및 ASN)과 대조하여 자동으로 검증합니다:
| 인증 상태 | 시스템 로직 | 해석 방법 |
|---|---|---|
| 인증됨 | 요청의 연결 IP가 OpenAI, Anthropic(Claude), Google, Perplexity, Apple, Bing, Meta, Amazon 등이 공개한 공식 서버 IP 범위 내에 있는 경우. | 이것이 공식적인 정식 방문임을 100% 확신할 수 있습니다. |
| 스푸핑됨 | 공개 IP 목록이 있는 유명한 봇을 사칭하지만 연결 IP가 공식 범위 내에 있지 않은 요청. | 외부 제3자 프로그램이 봇을 사칭하고 있음을 나타냅니다. 간헐적으로 발생하면 무시해도 되지만, 비정상적으로 높은 스크래핑 활동이 감지되면 해당 유형을 차단하거나 지원팀에 문의하십시오. |
| 인증 불가 | 봇을 운영하는 기업(공개 IP 목록이 없는 일부 AI 스타트업이나 서비스 등)이 아직 인증용 고정 IP 범위를 공개하지 않은 경우. | "인증 불가"가 악의적이거나 가짜라는 의미는 아닙니다. 단순히 운영자가 글로벌 인증을 위해 공식 IP 목록을 아직 공개하지 않았음을 의미합니다. 자체 헤드리스 프론트엔드를 사용하여 크롤러 방문을 보고하는 경우, Kanorio는 프론트엔드 서버의 IP를 수신하므로 이러한 방문도 여기에 분류됩니다. |
이 봇들이 보인다는 것은 귀하의 사이트가 AI의 검색 레이더에 성공적으로 진입했으며 기술적 장벽에 의해 차단되지 않았음을 의미합니다! AI가 특정 답변에서 귀하의 페이지를 인용할지 여부는 귀하의 콘텐츠가 사용자의 질문에 직접적으로 답하는지, 그리고 구조가 명확한지에 달려 있습니다. AI에 인용될 확률을 높이려면 AI 검색 최적화 및 봇 관리의 작성 제안을 참조하십시오.
새로 게시된 사이트의 경우, AI 크롤러와 검색 엔진이 외부 링크, 사이트맵 또는 IndexNow를 통해 귀하의 URL을 발견하는 데 시간이 걸립니다. "SEO › 개요" Google Search Console 원클릭 등록을 완료하는 것을 권장합니다. 일반적으로 며칠에서 몇 주 이내에 봇이 방문하는 것을 확인할 수 있습니다.
대시보드 총계, 봇 순위 및 페이지 수준의 의도 요약(AI 검색/학습/검색 엔진 열람)은 영구적으로 저장됩니다. 우측 상단에서 원하는 기간(쿼리당 최대 90일)을 선택하여 조회하고 비교할 수 있습니다. 페이지 수준의 의도 요약은 비교적 새로운 보고서로, 기능 출시 90일 전부터의 데이터를 사용할 수 있습니다. 이전 날짜는 총계와 순위만 표시됩니다. AI 어시스턴트(MCP) 또는 관리 API를 통해 조회하는 경우, 최대 10년(3,650일)의 총계와 페이지 수준 의도를 조회할 수 있습니다. "어떤 봇이 어떤 페이지를 몇 번 읽었는지"에 대한 상세 정보는 최근 90일 동안만 보관됩니다.