Perplexity · AI 검색 크롤러
PerplexityBot 차단 현황, 국내 플랫폼 51곳 중 20곳
국내 플랫폼 51곳의 robots.txt 를 판정하면 20곳(39.2%)이 PerplexityBot 의 공개 글 URL 수집을 차단합니다. 퍼플렉시티의 검색 답변용 크롤러입니다.
| robots.txt 토큰 | PerplexityBot |
|---|---|
| 운영사 | Perplexity |
| 종류 | AI 검색 크롤러 |
| 판정한 플랫폼 | 51곳 |
| 차단 | 20곳 |
| 허용 | 31곳 |
| 판정일 | 2026-10-27 |
공식 문서
운영사 문서에 적힌 PerplexityBot
It is not used to crawl content for AI foundation models.
설정
내 사이트에서 PerplexityBot 차단하기, robots.txt 두 줄
User-agent: PerplexityBot
Disallow: /조사 방법
판정 기준과 한계
- 각 플랫폼의 robots.txt 파일만 받아(UA MarketResearchBot/0.1) RFC 9309 로 판정했습니다. 경로는 그 플랫폼의 공개 글 URL 모양입니다.
- robots.txt 는 요청 규칙입니다. 방화벽 같은 다른 차단 장치는 이 표 밖입니다.
- Perplexity 「Perplexity Crawlers」 · 최종 확인일 2026-09-14 · https://docs.perplexity.ai/docs/resources/perplexity-crawlers
이 봇이 나오는 아티클