소셜·커뮤니티 · 1차 데이터
링크드인 URL 유형 13종 중 3종은 구글 검색 크롤러에 차단되어 있고, 피드 게시물 URL 도 그중 하나입니다
링크드인 robots.txt 를 URL 유형 13종으로 판별하니 구글 검색 크롤러에 10종이 허용되어 있고 피드 게시물(/feed/update/), 그룹, 검색 결과 3종이 차단되어 있었습니다. OpenAI·Claude 검색 크롤러에는 피드 게시물(/feed/update/) URL 까지 허용되어 있었고, PerplexityBot, ChatGPT-User, GPTBot, Google-Extended는 사이트 전체가 차단되어 있었습니다.
링크드인 게시물이 구글에 잘 노출된다는 주장과 링크드인 게시물은 색인되지 않는다는 주장이 함께 퍼져 있습니다. 두 주장의 차이는 링크드인이 URL 패턴마다 크롤러에 다른 규칙을 적용한 데서 비롯됩니다.
링크드인 robots.txt 를 2026-09-14에 수집해, 공개 URL 패턴 13종을 구글·빙 검색 크롤러와 AI 크롤러 6종 기준으로 판별했습니다. 구글 검색 결과 페이지는 robots.txt 가 크롤러를 차단하고 있어 수집하지 않았습니다.
발견 01
구글 검색 크롤러에 허용된 URL 은 13종 중 10종이고, 차단된 유형은 피드 게시물(/feed/update/), 그룹, 검색 결과입니다
- 허용
- 차단
열마다 판별 결과가 같은 크롤러끼리 묶었습니다. 기타 AI 크롤러 4종은 PerplexityBot, ChatGPT-User, GPTBot, Google-Extended 입니다. 수집일 2026-09-14.
허용된 유형은 개인 프로필, 회사 페이지, 게시물(/posts/), 아티클(Pulse), 뉴스레터, 채용 공고, 이벤트, 학교 페이지, 쇼케이스 페이지, 해시태그 피드입니다. 개인 프로필과 회사 페이지뿐 아니라 아티클·뉴스레터·채용 공고·이벤트 URL 까지 구글 검색 크롤러가 크롤링할 수 있습니다.
차단된 유형은 유형마다 규칙 한 줄씩입니다. 피드 게시물(/feed/update/)는 「Disallow: /feed/update/」, 그룹은 「Disallow: /groups/」, 검색 결과는 「Disallow: /search*」 규칙에 해당했습니다.
발견 02
피드 게시물(/feed/update/) URL 은 구글·빙에는 차단되고 OpenAI·Claude 검색 크롤러에는 허용되어 있습니다
User-agent: Googlebot Disallow: /feed/update/ Disallow: /groups/ Disallow: /search*
User-agent: OAI-SearchBot Disallow: /embed/feed/update/ Disallow: /groups/ Disallow: /search*
OpenAI 검색 크롤러 그룹에는 「Disallow: /embed/feed/update/」 규칙만 있고 「Disallow: /feed/update/」 규칙이 없습니다. Claude 검색 크롤러 그룹도 같습니다. robots.txt 판별은 규칙 단위라 이 한 줄 차이가 허용과 차단을 가릅니다.
같은 게시물을 공유해도 어떤 URL 패턴으로 공유됐는지에 따라 구글 검색 크롤러가 그 URL 을 크롤링할 수 있는지가 달라집니다. /posts/ 패턴은 구글·빙·OpenAI·Claude 검색 크롤러에 모두 허용되어 있습니다.
발견 03
명시되지 않은 크롤러는 모두 차단했고, Sitemap 지시문은 0개입니다
# LinkedIn may, in its discretion, permit certain automated access to certain LinkedIn pages, # for the limited purpose of including content in approved publicly available search engines.
파일에는 사용자 에이전트 그룹이 76개 있고, 마지막 * 그룹은 Disallow: / 입니다. 명시된 크롤러만 지정된 URL 을 크롤링할 수 있는 구조입니다.
PerplexityBot, ChatGPT-User, GPTBot, Google-Extended는 각자의 사용자 에이전트 그룹에서 Disallow: / 로 차단되었습니다. 구글 공식 문서는 Google-Extended 가 구글 검색 노출과 순위에 영향을 주지 않는다고 명시했으므로, 이 규칙은 구글 검색 판별과 별개로 봅니다.
robots.txt 의 Sitemap 지시문은 0개였습니다. 다른 플랫폼과의 비교는 소셜 플랫폼 사이트맵 아티클에서 따로 집계했습니다.
그럼 링크드인 게시물이 검색 결과와 AI 답변에 노출되게 하려면 어떻게 하나요?
- 검색 노출이 필요한 콘텐츠는 그룹 대신 회사 페이지·개인 게시물·아티클·뉴스레터에 발행합니다.
- 게시물 URL 을 외부에 공유할 때는 /posts/ 패턴인지 확인합니다. 피드 게시물(/feed/update/) 패턴은 구글·빙 검색 크롤러가 크롤링할 수 없습니다.
- Perplexity·ChatGPT 사용자 트리거 에이전트가 읽어야 할 원본 콘텐츠는 자사 사이트에 두고, 링크드인 게시물에서 그 원본으로 링크합니다.
조사 방법
- 판별은 RFC 9309 규칙을 따랐습니다. 사용자 에이전트 이름이 명시된 그룹이 있으면 그 그룹만, 없으면 * 그룹을 보고, 규칙이 겹치면 가장 긴 규칙을 따릅니다.
- URL 은 유형마다 공개 URL 패턴만 맞춘 예시입니다(번호·이름은 자리표시자). 링크드인 페이지 자체는 하나도 수집하지 않았습니다.
- 수집일 2026-09-14. UA MarketResearchBot/0.1 로 robots.txt 파일만 수집했습니다. 플랫폼이 크롤러마다 다른 파일을 제공하는지는 확인 범위 밖입니다.
- robots.txt 에서 허용되어 있다는 것은 크롤러가 그 URL 에 접근할 수 있다는 뜻입니다. 로그인 요구·noindex 에 따른 실제 색인 여부는 이 판별에 포함되지 않았습니다.
- 링크드인 고객센터 문서는 robots.txt 가 저희 UA 를 차단하고 있어 원문 확인 대상에서 제외했습니다.