DATAPREPREP

소셜·커뮤니티 · 1차 데이터

링크드인 게시물 구글 검색 노출, URL 유형별 robots.txt

링크드인 URL 유형 13종 중 3종은 구글 검색 크롤러에 차단되어 있고, 피드 게시물 URL 도 그중 하나입니다

글 DATAPREPREP · 2026-10-27 기준

URL 유형에 따라 다릅니다. 링크드인 robots.txt 를 URL 유형 13종으로 판별하니 게시물(/posts/)·프로필·회사 페이지 등 10종은 구글 검색 크롤러에 허용되어 있고, 피드 게시물(/feed/update/), 그룹, 검색 결과 3종은 차단되어 있었습니다. OpenAI·Claude 검색 크롤러에는 피드 게시물(/feed/update/) URL 까지 허용되어 있었고, PerplexityBot, ChatGPT-User, GPTBot, Google-Extended는 사이트 전체가 차단되어 있었습니다.

목차
  1. 구글 검색 크롤러에 허용된 URL 은 13종 중 10종이고, 차단된 유형은 피드 게시물(/feed/update/), 그룹, 검색 결과입니다
  2. 피드 게시물(/feed/update/) URL 은 구글·빙에는 차단되고 OpenAI·Claude 검색 크롤러에는 허용되어 있습니다
  3. 명시되지 않은 크롤러는 모두 차단했고, Sitemap 지시문은 0개입니다
  4. 그럼 링크드인 게시물이 검색 결과와 AI 답변에 노출되게 하려면 어떻게 하나요?
  5. 조사 방법

링크드인 게시물이 구글에 잘 노출된다는 주장과 링크드인 게시물은 색인되지 않는다는 주장이 함께 퍼져 있습니다. 두 주장의 차이는 링크드인이 URL 패턴마다 크롤러에 다른 규칙을 적용한 데서 비롯됩니다.

링크드인 robots.txt 를 2026-10-27에 수집해, 공개 URL 패턴 13종을 구글·빙 검색 크롤러와 AI 크롤러 6종 기준으로 판별했습니다. 구글 검색 결과 페이지는 robots.txt 가 크롤러를 차단하고 있어 수집하지 않았습니다.

발견 01

구글 검색 크롤러에 허용된 URL 은 13종 중 10종이고, 차단된 유형은 피드 게시물(/feed/update/), 그룹, 검색 결과입니다

링크드인 URL 유형 × 크롤러, 크롤링 허용 여부
  • 허용
  • 차단
구글·빙 검색 크롤러OpenAI·Claude 검색 크롤러기타 AI 크롤러 4종개인 프로필회사 페이지게시물 /posts/피드 게시물 /feed/update/아티클 Pulse뉴스레터채용 공고이벤트그룹학교 페이지쇼케이스 페이지해시태그 피드검색 결과구글·빙검색 크롤러OpenAI·Claude검색 크롤러기타AI 크롤러 4종개인 프로필회사 페이지게시물/posts/피드 게시물/feed/update/아티클Pulse뉴스레터채용 공고이벤트그룹학교 페이지쇼케이스 페이지해시태그 피드검색 결과

열마다 판별 결과가 같은 크롤러끼리 묶었습니다. 기타 AI 크롤러 4종은 PerplexityBot, ChatGPT-User, GPTBot, Google-Extended 입니다. 수집일 2026-10-27.

허용된 유형은 개인 프로필, 회사 페이지, 게시물(/posts/), 아티클(Pulse), 뉴스레터, 채용 공고, 이벤트, 학교 페이지, 쇼케이스 페이지, 해시태그 피드입니다. 개인 프로필과 회사 페이지뿐 아니라 아티클·뉴스레터·채용 공고·이벤트 URL 까지 구글 검색 크롤러가 크롤링할 수 있습니다.

차단 규칙은 유형마다 한 줄씩입니다(피드 게시물(/feed/update/) 「Disallow: /feed/update/」, 그룹 「Disallow: /groups/」, 검색 결과 「Disallow: /search*」).

발견 02

피드 게시물(/feed/update/) URL 은 구글·빙에는 차단되고 OpenAI·Claude 검색 크롤러에는 허용되어 있습니다

같은 게시물을 공유해도 어떤 URL 패턴으로 공유됐는지에 따라 구글 검색 크롤러가 그 URL 을 크롤링할 수 있는지가 달라집니다. /posts/ 패턴은 구글·빙·OpenAI·Claude 검색 크롤러에 모두 허용되어 있습니다.

User-agent: Googlebot Disallow: /feed/update/ Disallow: /groups/ Disallow: /search*
링크드인 robots.txt · Googlebot 그룹에서 옮긴 줄 · 수집일 2026-10-27
User-agent: OAI-SearchBot Disallow: /embed/feed/update/ Disallow: /groups/ Disallow: /search*
링크드인 robots.txt · OAI-SearchBot 그룹에서 옮긴 줄 · 수집일 2026-10-27

OpenAI 검색 크롤러 그룹에는 「Disallow: /embed/feed/update/」 규칙만 있고 「Disallow: /feed/update/」 규칙이 없습니다. Claude 검색 크롤러 그룹도 같습니다. robots.txt 판별은 규칙 단위라 이 한 줄 차이가 허용과 차단을 가릅니다.

발견 03

명시되지 않은 크롤러는 모두 차단했고, Sitemap 지시문은 0개입니다

파일에는 사용자 에이전트 그룹이 76개 있고, 마지막 * 그룹은 Disallow: / 입니다. 명시된 크롤러만 지정된 URL 을 크롤링할 수 있는 구조입니다.

# LinkedIn may, in its discretion, permit certain automated access to certain LinkedIn pages, # for the limited purpose of including content in approved publicly available search engines.

링크드인은 승인된 공개 검색엔진에 콘텐츠를 싣는 제한된 목적에 한해, 재량으로 일부 페이지에 대한 일부 자동 접근을 허용할 수 있다.

링크드인 robots.txt 첫머리 주석 · 수집일 2026-10-27

PerplexityBot, ChatGPT-User, GPTBot, Google-Extended는 각자의 사용자 에이전트 그룹에서 Disallow: / 로 차단되었습니다. 구글 공식 문서는 Google-Extended 가 구글 검색 노출과 순위에 영향을 주지 않는다고 명시했으므로, 이 규칙은 구글 검색 판별과 별개로 봅니다.

robots.txt 의 Sitemap 지시문은 0개였습니다. 다른 플랫폼과의 비교는 소셜 플랫폼 사이트맵 아티클에서 따로 집계했습니다.

그럼 링크드인 게시물이 검색 결과와 AI 답변에 노출되게 하려면 어떻게 하나요?

  1. 검색 노출이 필요한 콘텐츠는 그룹 대신 회사 페이지·개인 게시물·아티클·뉴스레터에 발행합니다.
  2. 게시물 URL 을 외부에 공유할 때는 /posts/ 패턴인지 확인합니다. 피드 게시물(/feed/update/) 패턴은 구글·빙 검색 크롤러가 크롤링할 수 없습니다.
  3. PerplexityBot(퍼플렉시티 검색 크롤러)·ChatGPT-User(사용자가 질문할 때 페이지를 가져오는 에이전트)는 링크드인을 크롤링할 수 없습니다. 이들이 읽어야 할 원본 콘텐츠는 자사 사이트에 두고, 링크드인 게시물에서 그 원본으로 링크합니다.

조사 방법

  • 판별은 RFC 9309 규칙을 따랐습니다. 사용자 에이전트 이름이 명시된 그룹이 있으면 그 그룹만, 없으면 * 그룹을 보고, 규칙이 겹치면 가장 긴 규칙을 따릅니다.
  • URL 은 유형마다 공개 URL 패턴만 맞춘 예시입니다(번호·이름은 자리표시자). 링크드인 페이지 자체는 하나도 수집하지 않았습니다.
  • 수집일 2026-10-27. UA MarketResearchBot/0.1 로 robots.txt 파일만 수집했습니다. 플랫폼이 크롤러마다 다른 파일을 제공하는지는 확인 범위 밖입니다.
  • robots.txt 에서 허용되어 있다는 것은 크롤러가 그 URL 에 접근할 수 있다는 뜻입니다. 로그인 요구·noindex 에 따른 실제 색인 여부는 이 판별에 포함되지 않았습니다.
  • 링크드인 고객센터 문서는 robots.txt 가 저희 UA 를 차단하고 있어 원문 확인 대상에서 제외했습니다.