AI 답변의 기준 · 공식 문서
리뉴얼 과업지시서 AI 검색 대응 항목과 납품물
크롤러별 허용 방침, 보안 장비·CDN 설정, 본문이 담긴 HTML, 핵심 내용의 텍스트화, 문단·소제목 구조, 서치 콘솔 인계의 6가지를 과업으로 적고 항목마다 납품물을 정합니다. 구글은 llms.txt 같은 AI 전용 파일과 콘텐츠 잘게 나누기는 구글 검색에 필요하지 않다고 적었습니다.
리뉴얼 제안서에 「AI 검색 최적화」 한 줄이 들어가는 일이 늘었습니다. 그런데 무엇을 납품하는지가 없으면 검수 때 확인할 것이 없습니다.
구글은 생성형 AI 검색도 기존 검색의 기술 기반 위에서 움직인다고 적었습니다. 그래서 과업지시서에는 AI 크롤러가 페이지를 가져가고 읽을 수 있게 하는 일을 납품물과 함께 적습니다.
발견 01
과업지시서에 적을 AI 검색 대응 항목은 6가지이고, 모두 확인할 납품물이 있습니다
| 항목 | 과업지시서 문장(예) | 납품물 | 공식 문서 원문 |
|---|---|---|---|
| 크롤러별 허용 방침 | 검색·AI 크롤러별 허용·차단 방침을 발주처와 정하고 robots.txt 에 반영한다. | 크롤러별 방침표와 공개 당일 robots.txt 원본 | Ensuring that crawling is allowed in robots.txt, and by any CDN or hosting infrastructure / To help ensure your site appears in search results, we recommend allowing OAI-SearchBot in your site’s robots.txt file and allowing requests from our published IP ranges below.robots.txt 와 CDN·호스팅 인프라에서 크롤링이 허용돼 있는지 확인합니다. OpenAI 는 검색 결과에 나오려면 robots.txt 에서 OAI-SearchBot 을 허용하고 공개 IP 범위의 요청을 허용하라고 권합니다. |
| 보안 장비·CDN | 방화벽·CDN 의 크롤러 차단 기능이 허용하기로 한 크롤러를 차단하지 않게 설정한다. | 장비별 허용 설정 화면과 공개 1주 뒤 접속 기록 확인 결과 | If you’re using a Web Application Firewall (WAF) to protect your site, you may need to explicitly whitelist Perplexity’s bots to ensure they can access your content.웹 방화벽(WAF)으로 사이트를 보호한다면, Perplexity 크롤러가 콘텐츠에 접근하도록 따로 허용 목록에 넣어야 할 수 있습니다. |
| 본문이 담긴 HTML | 제품·서비스·안내 페이지의 본문은 자바스크립트 실행 전 HTML 에 들어 있게 만든다. | 페이지 유형별 원본 HTML 확인표 | Google is able to process content within JavaScript as long as it isn't blocked. Keep in mind that server-side or pre-rendering is still a great idea because it makes your website faster for users and crawlers, and not all bots can run JavaScript. Currently, JavaScript is not executed and Cookies are not used.구글은 차단되지 않는 한 자바스크립트 안의 콘텐츠를 처리할 수 있습니다. 서버 측 렌더링이나 사전 렌더링은 사용자와 크롤러 모두에게 빠르고, 모든 크롤러가 자바스크립트를 실행하는 것은 아닙니다. Common Crawl 은 지금 자바스크립트를 실행하지 않고 쿠키도 쓰지 않습니다. |
| 핵심 내용의 텍스트화 | 이미지·첨부 파일 안에만 있는 핵심 내용은 본문 텍스트로도 제공한다. | 페이지별 텍스트 전환 목록 | Making sure that important content is available in textual form중요한 내용이 텍스트 형태로 있는지 확인합니다. |
| 문단·소제목 구조 | 페이지 템플릿마다 소제목 단계(h1·h2·h3)를 정하고 본문을 질문 단위로 나눈다. | 템플릿별 제목 구조표 | People generally appreciate it when web pages are organized by paragraphs and sections, along with headings that provide a clear structure to navigate content.사람들은 대개 웹 페이지가 문단과 섹션으로 나뉘고, 내용을 따라가기 쉬운 소제목이 있을 때 좋아합니다. |
| 서치 콘솔 인계 | 서치 콘솔 소유 확인은 발주처 계정으로 하고, 생성형 AI 기능 포함 설정과 생성형 AI 실적 보고서 확인 방법을 인계한다. | 소유자 목록 화면, 설정 화면, 보고서 확인 안내서 | In addition to the technical requirements for Search, a site must be included in Search generative AI features in Search Console to be eligible for display in generative AI features on Google Search. You can grant permissions to other users only if you are a property owner.검색 기술 요구사항에 더해, 구글 검색의 생성형 AI 기능에 표시되려면 서치 콘솔의 Google 검색 생성형 AI 기능에 사이트가 포함돼 있어야 합니다. 다른 사용자에게 권한을 줄 수 있는 것은 속성 소유자뿐입니다. |
In addition to the technical requirements for Search, a site must be included in Search generative AI features in Search Console to be eligible for display in generative AI features on Google Search.
검색 기술 요구사항에 더해, 구글 검색의 생성형 AI 기능에 표시되려면 서치 콘솔의 Google 검색 생성형 AI 기능에 사이트가 포함돼 있어야 합니다.
첫 두 항목은 크롤러가 들어올 수 있는지에 대한 것입니다. robots.txt 를 허용으로 두어도 보안 장비가 차단하면 크롤러는 닿지 못하므로 둘을 같이 적습니다.
셋째 항목이 렌더링입니다. 구글은 자바스크립트를 처리하지만, 모든 크롤러가 자바스크립트를 실행하지는 않는다고 적었습니다. Common Crawl 도 자바스크립트를 실행하지 않는다고 밝혔습니다.
URL 짝표·301 리디렉션 같은 검색 항목은 「홈페이지 리뉴얼 제안요청서·과업지시서 SEO 항목」 편에 자세히 적었습니다.
발견 02
구글은 llms.txt·콘텐츠 나누기 등 4가지를 구글 검색에는 필요 없다고 적었습니다
| 제안서에 보이는 항목 | 구글 공식 문서 원문 |
|---|---|
| llms.txt 등 AI 전용 파일·마크업 | LLMS.txt files and other "special" markup: You don't need to create new machine readable files, AI text files, markup, or Markdown to appear in Google Search (including its generative AI capabilities), as Google Search itself doesn't use them.LLMS.txt 파일과 기타 「특수」 마크업: 구글 검색(생성형 AI 기능 포함)에 나오려고 새 기계용 파일, AI 텍스트 파일, 마크업, 마크다운을 만들 필요는 없습니다. 구글 검색은 이것들을 쓰지 않습니다. |
| AI 가 읽기 좋게 콘텐츠 잘게 나누기 | "Chunking" content: There's no requirement to break your content into tiny pieces for AI to better understand it.콘텐츠 「잘게 나누기」: AI 가 더 잘 이해하도록 콘텐츠를 작은 조각으로 나눌 필요는 없습니다. |
| AI 전용 문체로 다시 쓰기 | Rewriting content just for AI systems: You don't need to write in a specific way just for generative AI search.AI 시스템만을 위한 다시 쓰기: 생성형 AI 검색만을 위해 특정 방식으로 쓸 필요는 없습니다. |
| AI 전용 구조화 데이터 | Overfocusing on structured data: Structured data isn't required for generative AI search, and there's no special schema.org markup you need to add.구조화 데이터에 지나치게 집중하기: 생성형 AI 검색에 구조화 데이터는 필요하지 않고, 따로 넣어야 할 특별한 schema.org 마크업도 없습니다. |
제안서에 이 항목들이 있으면 어느 서비스를 위한 것인지 묻습니다. 구글 검색을 이유로 들었다면 위 문장과 맞지 않습니다.
구조화 데이터는 리치 결과 자격을 위해 계속 쓰라고 구글이 적었습니다. 과업에 넣을 때는 AI 대응이 아니라 리치 결과 항목으로 적습니다.
발견 03
같은 항목이라도 B2B·B2C·B2G 는 과업지시서에서 무게를 두는 자리가 다릅니다
예시 ① 산업용 소재를 파는 제조사의 기술 자료 사이트(B2B)
물성표와 시험 성적이 이미지와 PDF 로만 올라가 있는 상황입니다. 바이어가 AI 에 물어도 답변이 수치를 근거로 쓰기 어렵습니다.
핵심 내용의 텍스트화를 과업의 중심에 두고, 제품마다 주요 수치를 본문 표로 옮기는 범위를 페이지 수로 적습니다.
예시 ② 자바스크립트 화면으로 바꾸는 예약형 서비스 사이트(B2C)
새 디자인이 화면 전체를 자바스크립트로 그리는 구조인 상황입니다. 원본 HTML 에 서비스 설명이 없으면 자바스크립트를 실행하지 않는 크롤러는 빈 페이지를 받습니다.
본문이 담긴 HTML 을 과업으로 적고, 납품 때 페이지 유형별 원본 HTML 을 열어 서비스 설명이 들어 있는지 검수합니다.
예시 ③ 공공기관 누리집 고도화 사업(B2G)
기관 보안 지침으로 웹 방화벽을 새로 들이는 사업입니다. 장비 기본 설정이 크롤러를 차단하면 공개 뒤 검색과 AI 답변 모두에서 페이지가 빠집니다.
보안 장비·CDN 항목과 서치 콘솔 인계를 「과업 내용」 표에 줄로 넣고, 소유자는 기관 계정으로 둡니다. 기관 쪽 점검은 「공공기관 홈페이지 AI 답변 인용 점검 순서」 편에 자세히 적었습니다.
그럼 과업지시서는 어떤 순서로 쓰나요?
- 지금 사이트의 robots.txt 와 방화벽·CDN 의 크롤러 차단 설정을 받아 과업지시서에 첨부합니다.
- 위 6가지를 「과업 내용」 표에 줄로 옮기고, 줄마다 납품물을 적습니다.
- 제안서에 AI 전용 파일·콘텐츠 나누기 같은 항목이 있으면 어느 서비스를 위한 것인지 적게 합니다.
- 공개 당일 robots.txt 원본과 페이지 유형별 원본 HTML 을 받아 검수합니다.
- 공개 1주 뒤 접속 기록에서 허용하기로 한 크롤러의 요청이 들어오는지 확인합니다. 확인 순서는 「AI 크롤러 차단 확인, 서버 로그와 CDN 점검 순서」 편에 자세히 적었습니다.
조사 방법
- Google Search Central 「Optimizing your website for generative AI features on Google Search」 (문서 수정일 2026-07-10) · 최종 확인일 2026-10-25 · https://developers.google.com/search/docs/fundamentals/ai-optimization-guide
- Google Search Central 「AI features and your website」 (문서 수정일 2025-12-10) · 최종 확인일 2026-10-25 · https://developers.google.com/search/docs/appearance/ai-features
- Google Search Central 「Understand the JavaScript SEO basics」 (문서 수정일 2026-03-04) · 최종 확인일 2026-10-25 · https://developers.google.com/search/docs/crawling-indexing/javascript/javascript-seo-basics
- OpenAI 「Overview of OpenAI Crawlers」 · 최종 확인일 2026-10-25 · https://developers.openai.com/api/docs/bots
- Perplexity 「Perplexity Crawlers」 · 최종 확인일 2026-10-25 · https://docs.perplexity.ai/docs/resources/perplexity-crawlers
- Common Crawl 「Frequently Asked Questions」 · 최종 확인일 2026-10-25 · https://commoncrawl.org/faq
- Search Console Help 「Managing owners, users, and permissions」 · 최종 확인일 2026-10-25 · https://support.google.com/webmasters/answer/7687615
- AI 검색 대응 항목 6가지는 위 문서들이 크롤링·렌더링·측정에 대해 적은 일을 과업 단위로 묶은 것입니다. 묶는 방식은 편집 판단입니다.
- 예시 ①②③은 이해를 돕기 위해 만든 가상 상황이며, 실제 기업·기관의 사례가 아닙니다.
- 원문은 영어판(hl=en)이고, 도구·보고서 이름은 같은 문서 한국어판(hl=ko) 표기를 따랐습니다.