업체·사업 유형 · 공식 문서
B2B 기업 홈페이지 자료실, 회원 전용 자료 공개 기준
로그인해야 보이는 페이지는 검색에 실리기 어렵습니다. 구글은 크롤링할 페이지가 익명 사용자에게 열려 있어야 한다고 적었습니다. 그래서 자료마다 전체 공개·요약 공개·잠금 중 하나를 정합니다. 흔한 자료 6종 중 4종은 검색에 여는 쪽입니다.
B2B 회사는 카탈로그·데이터시트를 회원 전용 자료실에 두는 일이 많습니다. 누가 자료를 받았는지 알고 싶어서입니다.
그런데 구매자가 품번으로 검색했을 때 닿아야 할 자료도 그 안에 있습니다. 그래서 자료실은 통째로 잠그기보다 자료마다 열고 닫을 범위를 정합니다.
발견 01
구글은 크롤링할 페이지가 익명 사용자에게 열려 있어야 한다고 적었습니다
Be sure that any resources (images, CSS files, and so on) or pages that Google is meant to crawl are accessible to Google; that is, they are not blocked by any robots.txt rules and are accessible to an anonymous user. Inaccessible pages will not appear in the Page Indexing report, and the URL Inspection tool will show them as not crawled.
구글이 크롤링할 페이지와 리소스는 robots.txt 로 차단되지 않고 익명 사용자도 열 수 있어야 한다. 열 수 없는 페이지는 페이지 색인 생성 보고서에 나오지 않고, URL 검사 도구에는 크롤링되지 않음으로 나온다.
로그인해야 열리는 페이지는 익명 사용자에게 닫혀 있습니다. 구글은 이런 페이지가 서치 콘솔 페이지 색인 생성 보고서에도 나오지 않는다고 적었습니다.
반대로 비밀번호로 잠근 자료는 검색에서 빠집니다. 구글은 이 방식을 비공개 자료를 지키는 방법으로 적었습니다.
You might have data hosted on your site that you want to show only to users who are already on your site. If you have confidential or private content on your site, you need to password protect it to ensure only authorized users can access it.
사이트에 이미 들어온 사용자에게만 보여 줄 데이터가 있을 수 있다. 기밀이거나 비공개인 콘텐츠는 허가된 사용자만 보도록 비밀번호로 보호해야 한다.
발견 02
흔한 자료 6종 중 4종은 전체 또는 요약을 검색에 엽니다
| 자료 종류 | 판단 | 이유 | 공식 문서 원문 |
|---|---|---|---|
| 제품 카탈로그·사양 | 전체 공개 | 구매자가 품번·규격으로 찾아오는 자료입니다. 로그인 뒤에 두면 크롤러가 열지 못합니다 | Be sure that any resources (images, CSS files, and so on) or pages that Google is meant to crawl are accessible to Google; that is, they are not blocked by any robots.txt rules and are accessible to an anonymous user.구글이 크롤링해야 할 리소스(이미지·CSS 파일 등)와 페이지는 robots.txt 규칙에 차단되지 않고 로그인 없이 열려야 한다. |
| 기술 자료·데이터시트 PDF | 전체 공개 | 파일을 열 때 로그인을 묻지 않으면 이미 공개 자료입니다. 문서 속성 정보까지 검색에 나올 수 있습니다 | Also keep in mind that certain files published on your site may have metadata that can show up in Search.사이트에 올린 일부 파일에는 검색에 나올 수 있는 메타데이터가 들어 있을 수 있다는 점도 기억한다. |
| 적용 사례·백서 | 요약 공개 | 요지와 목차는 페이지 글로 열고, 전문 내려받기는 회원에게 엽니다 | If you want to provide a limited number of views to visitors without a subscription or login, read about flexible sampling to learn some best practices about providing limited access to your content.구독이나 로그인 없이 일부만 보여 주려면 유연한 샘플링 문서의 권장 방식을 참고한다. |
| 교육 영상·웨비나 다시보기 | 요약 공개 | 앞부분이나 요약만 보여 주는 방식은 구글이 권하는 샘플링 방식 중 하나입니다 | There are two types of sampling we advise: metering, which provides users with a quota of articles to consume before requiring users to subscribe or log in, after which paywalls will start appearing; and lead-in, which offers a portion of an article's content without it being shown in full.권하는 샘플링은 두 가지다. 정해진 편수만큼 보여 준 뒤 구독·로그인을 요구하는 미터링과, 글의 일부만 보여 주고 전체는 보여 주지 않는 리드인이다. |
| 거래처별 단가표·견적 조건 | 잠금 | 보여 줄 사람이 정해진 자료입니다. 비밀번호로 잠그면 검색에서도 빠집니다 | If you have confidential or private content on your site, you need to password protect it to ensure only authorized users can access it. This will also prevent that content from appearing in Google Search, or if it already appears, it will eventually remove that content from our search results.기밀·비공개 콘텐츠는 승인된 사용자만 볼 수 있게 비밀번호로 보호해야 한다. 그러면 구글 검색에도 나오지 않고, 이미 나왔다면 결국 검색 결과에서 빠진다. |
| 주문·발주 시스템 화면 | 잠금 | 로그인 뒤 화면은 401 상태 코드로 응답해 크롤러에게 잠긴 페이지임을 알립니다 | To tell Googlebot if a page can't be crawled or indexed, use a meaningful status code, like a 404 for a page that could not be found or a 401 code for pages behind a login.페이지를 크롤링하거나 색인할 수 없을 때는 의미 있는 상태 코드로 알린다. 없는 페이지는 404, 로그인 뒤 페이지는 401 이다. |
판단의 기준은 하나입니다. 처음 보는 구매자가 검색으로 찾아와야 하는 자료는 열고, 보여 줄 사람이 정해진 자료는 잠급니다.
요약 공개는 둘 사이의 길입니다. 백서의 요지와 목차를 페이지 글로 열어 두면 검색에 실릴 거리가 생기고, 전문은 회원 신청으로 받습니다.
회원에게만 주는 본문을 Googlebot 에게는 전부 보여 주는 방식은 클로킹과 구분하는 조건이 따로 있습니다. 「유료사이트 구글봇」 편에 자세히 적었습니다.
발견 03
잠글 때 흔한 실수 4가지는 구글 문서에 바로잡는 법이 있습니다
| 흔한 실수 | 바로잡는 법 | 공식 문서 원문 |
|---|---|---|
| robots.txt 로 자료실을 차단해 색인을 막으려 함 | 검색에서 뺄 페이지는 noindex 나 로그인으로 처리합니다 | Don't use robots.txt as a mechanism to prevent indexing; use the noindex tag or login requirements for that.robots.txt 를 색인을 막는 수단으로 쓰지 않는다. 색인에서 빼려면 noindex 태그나 로그인을 쓴다. |
| 본문을 응답에 다 넣고 자바스크립트로 가림 | 서버가 회원을 확인한 뒤에만 본문을 응답에 담습니다 | Some JavaScript paywall solutions include the full content in the server response, then use JavaScript to hide it until subscription status is confirmed. This isn't a reliable way to limit access to the content.어떤 JavaScript 페이월은 서버 응답에 전체 본문을 넣고 구독이 확인될 때까지 JavaScript 로 가린다. 이것은 접근을 제한하는 믿을 만한 방법이 아니다. |
| 회원 전용 링크를 공개 페이지에 그냥 둠 | 로그인이 필요한 링크에는 rel=nofollow 를 붙입니다 | Use rel=nofollow for paid links, links that require login, or untrusted content (such as user-submitted content) to avoid passing your quality signals on to them, or having their bad quality reflect on you.유료 링크, 로그인이 필요한 링크, 믿기 어려운 콘텐츠에는 rel=nofollow 를 써서 품질 신호가 넘어가거나 나쁜 품질이 우리 사이트에 비치지 않게 한다. |
| 회원가입·장바구니 URL을 크롤러에 열어 둠 | 상태를 바꾸는 URL은 robots.txt 로 차단합니다 | Block access to URLs that change state, such as posting comments, creating accounts, adding items to a cart, and so on.댓글 작성·계정 만들기·장바구니 담기처럼 상태를 바꾸는 URL은 접근을 차단한다. |
PDF 파일 URL이 로그인 없이 열리면 자료실 목록 화면을 잠가도 파일은 공개 상태입니다. 영업 메일에 붙인 링크로 크롤러가 닿을 수 있습니다.
이미 검색에 나온 자료를 빼야 하면 noindex 를 넣거나 파일을 내립니다. 구글은 파일을 내리는 것을 가장 확실한 방법으로 적었습니다.
The noindex robots meta tag is a rule that tells Google not to index your content or let it appear in Google Search results. Your content can still be linked to and visited through other web pages, or directly visited by users with a link, but the content won't appear in Google Search results.
noindex 로봇 메타 태그는 구글에 콘텐츠를 색인하지 말고 검색 결과에 보이지 말라는 규칙이다. 다른 페이지의 링크나 직접 방문으로는 여전히 열 수 있지만 검색 결과에는 나오지 않는다.
Removing content from your site is the best way to ensure that it won't appear in Google Search and anywhere else on the Internet.
사이트에서 콘텐츠를 지우는 것이 구글 검색과 인터넷 어디에도 나오지 않게 하는 가장 확실한 방법이다.
발견 04
같은 기준이라도 B2B·B2C·B2G 는 잠그는 자료가 다릅니다
예시 ① 대리점 전용 자료실을 둔 산업용 펌프 제조사(B2B)
카탈로그와 단가표가 같은 자료실에 섞여 있는 경우입니다. 카탈로그는 제품 페이지로 꺼내 전체 공개하고, 단가표만 대리점 로그인 뒤에 둡니다.
제품 페이지에서 단가표로 가는 링크에는 rel=nofollow 를 붙입니다.
예시 ② 회원 등급별 혜택을 둔 자사 쇼핑몰(B2C)
상품 상세는 누구나 보고, 회원가 표시만 로그인 뒤에 나오는 경우입니다. 상품 설명과 사양은 비회원 화면에도 글로 둡니다.
장바구니·회원가입 URL은 상태를 바꾸는 URL이므로 robots.txt 로 차단합니다.
예시 ③ 기관 직원용 업무 자료를 둔 공공기관 누리집(B2G)
공개 공지와 내부 업무 자료가 같은 게시판 틀을 쓰는 경우입니다. 내부 자료는 로그인 뒤에 두고 401 로 응답하게 합니다.
공개 공지의 첨부 파일은 본문에 요지를 글로 적어 둡니다. 첨부 형식 판단은 「구글 색인 파일 형식」 편에 있습니다.
그럼 우리 자료실은 어떤 순서로 정리하나요?
- 자료실의 자료를 모두 목록으로 뽑고, 위 표의 자료 종류 칸으로 나눕니다.
- 자료마다 전체 공개·요약 공개·잠금 중 하나를 적습니다.
- 전체 공개할 자료는 로그인 없이 열리는 페이지로 옮기고, 서치 콘솔 URL 검사 도구로 크롤링 결과를 봅니다.
- 잠글 자료는 PDF 파일 URL까지 로그인 없이 열리지 않는지 시크릿 창에서 확인합니다.
- 위 실수 4가지 표로 robots.txt·링크·자바스크립트 처리를 한 번 더 점검합니다.
조사 방법
- Google Search Central 「Maintaining your website's SEO」 (문서 수정일 2025-12-18) · 최종 확인일 2026-10-25 · https://developers.google.com/search/docs/fundamentals/get-started
- Google Search Central 「Control what you share with Google Search」 (문서 수정일 2026-10-21) · 최종 확인일 2026-10-25 · https://developers.google.com/search/docs/crawling-indexing/control-what-you-share
- Google Search Central 「Flexible Sampling general guidance」 (문서 수정일 2025-12-10) · 최종 확인일 2026-10-25 · https://developers.google.com/search/docs/appearance/flexible-sampling
- Google Search Central 「Fix Search-related JavaScript problems」 (문서 수정일 2025-12-18) · 최종 확인일 2026-10-25 · https://developers.google.com/search/docs/crawling-indexing/javascript/fix-search-javascript
- Google Search Central 「Understand the JavaScript SEO basics」 (문서 수정일 2026-03-04) · 최종 확인일 2026-10-25 · https://developers.google.com/search/docs/crawling-indexing/javascript/javascript-seo-basics
- 자료 6종과 판단은 위 문서들이 공개·비공개 콘텐츠에 대해 적은 내용을 B2B 자료실에 맞춰 묶은 것입니다. 묶는 방식과 판단 칸은 편집 판단입니다.
- 예시 ①②③은 이해를 돕기 위해 만든 가상 상황이며, 실제 기업·기관의 사례가 아닙니다.
- 원문은 영어판(hl=en)이고, 도구·보고서 이름은 같은 문서 한국어판(hl=ko) 표기를 따랐습니다.