AI 답변의 기준 · 공식 문서

구글은 GEO도 SEO라고 적었고, 국내 플랫폼 51곳은 AI 학습 크롤러를 평균 49.5% 차단했습니다

구글은 생성형 AI 검색을 위한 최적화도 검색 경험을 위한 최적화이므로 여전히 SEO라고 공식 문서에 적었습니다. 다른 점은 크롤러입니다. AI 회사들은 검색·답변용과 학습용 크롤러를 따로 두었습니다. 국내 플랫폼 51곳에서 AI 학습 크롤러를 차단한 비율은 평균 49.5%, AI 검색 크롤러는 35.9%, 검색 크롤러는 15%입니다.

SEO(검색엔진 최적화)는 검색엔진이 페이지를 크롤링·색인해 검색 결과에 보여 줄 수 있게 사이트를 정비하는 일입니다.

GEO(생성형 엔진 최적화)는 AI 개요·ChatGPT 검색 같은 AI 답변에 출처로 실리게 하는 일입니다. AEO(답변 엔진 최적화)도 같은 목표를 부르는 다른 이름입니다.

GEO를 SEO와 다른 새 분야로 설명하는 글도 있고, 이름만 바꾼 SEO라고 하는 글도 있습니다. 두 주장을 1차 출처로 확인했습니다.

기준은 구글의 생성형 AI 검색 가이드와 AI 회사들의 크롤러 문서, 그리고 국내 플랫폼 robots.txt 를 크롤러별로 판정한 데이터프리프랩 실측입니다.

발견 01

구글은 생성형 AI 검색 최적화도 여전히 SEO라고 적었습니다

From Google Search's perspective, optimizing for generative AI search is optimizing for the search experience, and thus still SEO.

구글 검색 입장에서 생성형 AI 검색을 위한 최적화는 검색 경험을 위한 최적화이며, 따라서 여전히 SEO다.

Google Search Central 「Optimizing your website for generative AI features on Google Search」

같은 구글 문서는 AI 개요·AI 모드에 링크로 실리는 조건을 색인으로 적었습니다. 그래서 구글 쪽 GEO의 첫 단계는 크롤링과 색인, 곧 SEO입니다.

To be eligible to be shown as a supporting link in AI Overviews or AI Mode, a page must be indexed and eligible to be shown in Google Search with a snippet, fulfilling the Search technical requirements.

AI 개요나 AI 모드에 뒷받침 링크로 표시될 자격을 얻으려면, 페이지가 색인되어 있고 스니펫과 함께 Google 검색에 표시될 자격이 있어 검색의 기술 요구사항을 충족해야 한다.

Google Search Central 「AI features and your website」

빙도 같은 기반을 적었습니다. 코파일럿 검색은 일반 검색과 같은 크롤링·색인·순위 기반을 씁니다.

Bing and Copilot search experiences rely on the same core crawling, indexing, and ranking foundation as traditional search.

빙과 코파일럿 검색은 일반 검색과 같은 크롤링·색인·순위 기반을 쓴다.

Microsoft Bing 「Bing Webmaster Guidelines」

발견 02

AI 회사들은 검색·답변용과 학습용 크롤러를 따로 적었습니다

Each setting is independent of the others – for example, a webmaster can allow OAI-SearchBot in order to appear in search results while disallowing GPTBot to indicate that crawled content should not be used for training OpenAI’s generative AI foundation models.

각 설정은 서로 독립적이다. 예를 들어 웹마스터는 검색 결과에 나오도록 OAI-SearchBot 은 허용하고, 크롤링한 콘텐츠를 OpenAI 생성형 AI 기반 모델 학습에 쓰지 말라는 뜻으로 GPTBot 은 차단할 수 있다.

OpenAI 「Overview of OpenAI Crawlers」

OpenAI 는 검색 답변용 OAI-SearchBot 과 학습용 GPTBot 을 따로 허용·차단할 수 있다고 적었습니다. 7개사의 크롤러 이름은 「AI 크롤러 종류, 기업별 크롤러 공식 문서 대조」 편에 표로 정리했습니다.

발견 03

국내 플랫폼 51곳은 AI 학습 크롤러를 검색 크롤러보다 많이 차단했습니다

크롤러 종류판정한 크롤러평균 차단 비율(%)
검색 크롤러Googlebot, Yeti, Bingbot15
AI 검색 크롤러OAI-SearchBot, Claude-SearchBot, PerplexityBot35.9
AI 학습 크롤러GPTBot, ClaudeBot, Google-Extended, CCBot49.5
robots.txt 를 RFC 9309 로 판정한 데이터프리프랩 실측(2026-10-27). 크롤러마다 플랫폼 51곳 중 차단 비율을 구해 종류별로 평균했습니다.

같은 플랫폼이라도 검색 크롤러는 받고 학습 크롤러는 막는 경우가 많습니다. AI 답변에 실리려면 검색·답변용 크롤러가 읽을 수 있어야 하고, 학습용 크롤러 허용 여부는 따로 정할 수 있습니다.

그럼 GEO는 무엇부터 하나요?

  1. 구글 서치 콘솔 URL 검사로 핵심 페이지가 색인됐는지부터 확인합니다. 구글은 AI 개요·AI 모드의 링크 조건을 색인과 스니펫 노출 자격으로 적었습니다.
  2. robots.txt 에서 검색·답변용(OAI-SearchBot·Claude-SearchBot·PerplexityBot)과 학습용(GPTBot·ClaudeBot·Google-Extended)을 따로 정합니다.
  3. 인용될 근거는 화면에 보이는 본문의 정의·수치·비교로 둡니다.
  4. 입점한 플랫폼이 어떤 크롤러를 차단하는지 크롤러 사전(/data/bot)에서 확인합니다. 플랫폼 안의 글은 그 플랫폼 robots.txt 를 따릅니다.
  5. 네이버 검색은 서치어드바이저 기준이 따로 있습니다. 「네이버에서 웹사이트 SEO는 어떻게 하나요?」 편에서 확인합니다.

조사 방법

  • Google Search Central 「Optimizing your website for generative AI features on Google Search」 (문서 수정일 2026-07-10) · 최종 확인일 2026-10-18 · https://developers.google.com/search/docs/fundamentals/ai-optimization-guide
  • Google Search Central 「AI features and your website」 (문서 수정일 2025-12-10) · 최종 확인일 2026-10-15 · https://developers.google.com/search/docs/appearance/ai-features
  • Microsoft Bing 「Bing Webmaster Guidelines」 · 최종 확인일 2026-10-18 · https://www.bing.com/webmasters/help/webmaster-guidelines-30fba23a
  • OpenAI 「Overview of OpenAI Crawlers」 · 최종 확인일 2026-09-14 · https://developers.openai.com/api/docs/bots
  • 크롤러별 차단 비율은 데이터프리프랩 크롤러 사전(/data/bot)의 값입니다. 다음(Daum)은 판정한 플랫폼이 달라 평균에서 뺐습니다.