ARTICLE
1차 데이터와 공식 문서로 검증한 SEO·GEO 리서치
데이터프리프랩 아티클은 직접 수집한 1차 데이터와 검색엔진·AI 기업의 공식 문서로 확인한 내용만 게재합니다. 검색과 AI 답변에 관한 주장 가운데 원출처까지 추적해 근거가 확인된 것만 다룹니다.
「Perplexity」 아티클 16편 · 전체 보기
- 크롤링·플랫폼
AI 크롤러 차단 확인, 서버 로그와 CDN 점검 순서
AI 크롤러가 우리 사이트에 들어오고 있는지, 혹시 차단돼 있는지 어떻게 확인하나요?
- AI 답변의 기준
AI 크롤러 차단 여부, 학습과 검색 나눠 정하는 기준
AI 크롤러를 차단해야 하나요, 허용해야 하나요?
- 크롤링·플랫폼
AI 크롤러 방화벽 차단, 필요한 경우와 주의할 점
robots.txt 말고 서버나 방화벽에서 AI 크롤러를 차단해야 할 때는 언제이고, 무엇을 조심하나요?
- 크롤링·플랫폼
AI 크롤러 자바스크립트, CSR 사이트 점검 순서
AI 크롤러는 자바스크립트를 실행하나요? 화면을 자바스크립트로 그리는 사이트는 AI 답변에서 빠지나요?
- AI 답변의 기준
AI 크롤러 목록, 학습용과 검색용 구분 기준
AI 크롤러는 어떤 것들이 있고, 각각 학습용인지 검색용인지 어떻게 구분하나요?
- AI 답변의 기준
AI 검색 엔진 종류, 서비스별 출처 경로와 크롤러
사이트 주인이 신경 써야 할 AI 검색 서비스는 어떤 것들이고, 각각 출처를 어디서 가져오나요?
- 크롤링·플랫폼
AI 검색 robots.txt 반영 시간, 크롤러별 확인 시점
robots.txt 를 바꾸면 AI 검색에 반영되기까지 얼마나 걸리나요?
- 크롤링·플랫폼
AI 학습 차단 robots.txt, 검색은 남기는 작성 예시
AI 학습은 차단하고 AI 검색 답변에는 남으려면 robots.txt를 어떻게 쓰나요?
- 크롤링·플랫폼
bingbot crawl-delay, 크롤러별 지원 여부와 대안
AI 크롤러나 Bingbot 이 너무 자주 와서 서버가 느려지면 crawl-delay 로 줄일 수 있나요?
- 측정·순위
GA4 AI 유입 확인, ChatGPT·퍼플렉시티 방문 구분 순서
ChatGPT·퍼플렉시티 같은 AI 서비스에서 들어온 방문은 GA4에서 어떻게 구분하나요?
- AI 답변의 기준
GEO 사례, 공개 수치가 잰 것과 기대 범위 잡는 법
GEO로 실제 효과가 난 사례가 있나요? 우리 사이트는 어느 정도를 기대하면 되나요?
- AI 답변의 기준
PerplexityBot 차단 범위와 Perplexity-User 차이
PerplexityBot 과 Perplexity-User 는 무엇이 다르고, 차단하면 퍼플렉시티 답변에서 빠지나요?
- 크롤링·플랫폼
GPTBot IP 범위 확인, 위장 크롤러 가려내는 순서
우리 서버에 들어온 GPTBot·ClaudeBot 이 진짜인지 어떻게 확인하나요?
- AI 답변의 기준
llms.txt 란? 제안 문서·구글 입장·국내 사용 현황
국내 플랫폼 24개의 /llms.txt 를 요청하니 실제 파일은 2개였습니다
- AI 답변의 기준
AI 크롤러 종류, 기업별 크롤러 공식 문서 대조
AI 기업 7개사 중 4개사는 사용자 트리거 에이전트에 robots.txt 가 적용되지 않을 수 있다고 명시했습니다
- 소셜·커뮤니티
링크드인 게시물 구글 검색 노출, URL 유형별 robots.txt
링크드인 URL 유형 13종 중 3종은 구글 검색 크롤러에 차단되어 있고, 피드 게시물 URL 도 그중 하나입니다
읽으신 기준을 귀사 사이트에 대어 봅니다. URL 하나를 보내 주시면 막혀 있는 곳과 개선 순서를 정리해 회신합니다.
무료 진단