색인·웹마스터 도구 · 공식 문서
중복 콘텐츠 불이익, URL 중복과 복사 글 기준
사이트 안에서 같은 내용이 여러 URL로 열리는 중복은 정상이며, 구글은 그중 표준 URL 하나를 골라 씁니다. 다른 사이트 글을 거의 그대로 옮기거나 틀 하나로 페이지를 대량으로 찍은 경우는 스팸 정책의 스크래핑·확장된 콘텐츠 악용에 해당합니다.
「중복 콘텐츠」라는 말에는 서로 다른 두 가지가 섞여 있습니다. 우리 사이트 안에서 같은 페이지가 여러 URL로 열리는 일과, 남의 글을 옮겨 오는 일입니다.
구글 공식 문서는 둘을 다른 문서에서 다룹니다. 앞의 것은 표준화 문서에, 뒤의 것은 스팸 정책에 있습니다.
발견 01
구글은 사이트 안의 일부 중복을 정상이라고 적고, 표준 URL 하나를 골라 씁니다
Some duplicate content on a site is normal and it's not a violation of Google's spam policies.
사이트에 어느 정도 중복 콘텐츠가 있는 것은 정상이며 구글 스팸 정책 위반이 아니다.
사이트 안의 중복 URL은 스팸 정책 위반이 아닙니다. 구글은 같은 내용의 페이지를 한데 묶고 그중 하나를 표준 URL로 골라 검색 결과에 씁니다.
표준 URL은 지정할 수 있지만, 구글은 이것이 규칙이 아니라 힌트라고 적었습니다(원문: That is, indicating a canonical preference is a hint, not a rule.) 지정 방법과 신호 세기는 「캐노니컬 태그」 편에 자세히 적었습니다.
발견 02
불이익을 가르는 기준은 「같은 사이트 안의 URL 문제인가, 남의 글을 옮긴 것인가」이고, 상황은 7가지입니다
| 상황 | 구분 | 구글의 처리 | 할 일 | 공식 문서 원문 |
|---|---|---|---|---|
| 같은 페이지가 http·https 로 모두 열림 | 사이트 안 중복 URL | 표준 URL 하나를 골라 검색 결과에 씁니다 | https 하나로 301 리디렉션을 겁니다 | Protocol variants: for example, the HTTP and HTTPS versions of a site프로토콜 변형. 예: 사이트의 HTTP 판과 HTTPS 판. |
| 분류 페이지의 정렬·필터 결과가 URL마다 열림 | 사이트 안 중복 URL | 표준 URL 하나를 골라 검색 결과에 씁니다 | 기본 분류 페이지를 캐노니컬로 지정합니다 | Site functions: for example, the results of sorting and filtering functions of a category page사이트 기능. 예를 들어 카테고리 페이지의 정렬·필터 기능 결과. |
| 모바일 페이지와 데스크톱 페이지가 따로 있음 | 사이트 안 중복 URL | 표준 URL 하나를 고르고, 기기에 맞는 쪽을 보여 줄 수 있습니다 | 두 페이지의 짝을 캐노니컬로 이어 둡니다 | Device variants: for example, a page with both a mobile and a desktop version기기 변형. 예를 들어 모바일 버전과 데스크톱 버전이 모두 있는 페이지. |
| 개발·시연 서버가 크롤러에 열려 있음 | 사이트 안 중복 URL | 표준 URL 하나를 골라 검색 결과에 씁니다 | 시연 서버는 비밀번호로 보호합니다 | Accidental variants: for example, the demo version of the site is accidentally left accessible to crawlers실수로 생긴 변형: 예를 들어 사이트의 데모 버전이 실수로 크롤러에게 열려 있는 경우. |
| 다른 사이트 글을 그대로, 또는 동의어만 바꿔 다시 게시 | 복사 글 | 스팸 정책의 스크래핑에 해당합니다 | 자사 경험과 1차 데이터로 새로 쓰고, 옮긴 글은 내립니다 | Republishing content from other sites without adding any original content or value, or even citing the original source / Copying content from other sites, modify it only slightly (for example, by substituting synonyms or using automated techniques), and republish it독창적인 내용이나 가치를 더하지 않고, 원 출처도 밝히지 않은 채 다른 사이트 콘텐츠를 다시 게시하는 것. 다른 사이트 콘텐츠를 복사해 동의어 치환이나 자동 기법으로 조금만 바꿔 다시 게시하는 것. |
| 틀 하나에 이름만 바꾼 페이지를 대량으로 생성 | 복사 글 | 스팸 정책의 확장된 콘텐츠 악용에 해당합니다 | 페이지마다 그 대상에만 있는 내용을 채우고, 못 채우는 페이지는 묶습니다 | Scaled content abuse is when many pages are generated for the primary purpose of manipulating search rankings and not helping users.확장된 콘텐츠 악용은 사용자를 돕기보다 검색 순위 조작을 주목적으로 많은 페이지를 생성하는 것이다. |
| 원 판매처의 상품 설명·후기를 그대로 옮긴 제휴 페이지 | 복사 글 | 스팸 정책의 빈약한 제휴에 해당합니다 | 가격 정보·직접 써 본 후기·비교처럼 더하는 내용을 둡니다 | Thin affiliation is the practice of publishing content with product affiliate links where the product descriptions and reviews are copied directly from the original merchant without any original content or added value.판매처의 상품 설명과 후기를 고유 콘텐츠나 더한 가치 없이 그대로 옮겨 제휴 링크와 함께 올리는 것. |
Scraping refers to the practice of taking content from other sites, often through automated means, and hosting it with the purpose of manipulating search rankings.
스크래핑은 대개 자동화된 수단으로 다른 사이트 콘텐츠를 가져와 검색 순위를 조작할 목적으로 게시하는 것이다.
복사 글을 가르는 열쇠는 「더한 것이 있는가」입니다. 원문은 옮긴 내용에 독창적인 내용이나 가치를 더하지 않은 경우를 스크래핑으로 적었습니다.
제휴 페이지도 같은 기준입니다. 구글은 제휴 프로그램에 참여한다고 모두 빈약한 제휴는 아니라고 적었습니다.
Not every site that participates in an affiliate program is a thin affiliate.
제휴 프로그램에 참여하는 사이트가 모두 빈약한 제휴 페이지인 것은 아니다.
발견 03
사이트 안 중복 URL의 비용은 벌점이 아니라 사용자 혼란, 성과 추적, 크롤링 시간입니다
| 비용 | 공식 문서 원문 |
|---|---|
| 사용자 혼란과 성과 추적 | However, having the same content accessible through many different URLs can be a bad user experience (for example, people might wonder which is the right page, and whether there's a difference between the two) and it may make it harder for you to track how your content performs in search results.같은 콘텐츠를 여러 URL로 볼 수 있으면 사용자 경험이 나빠질 수 있고(어느 페이지가 맞는지, 둘이 다른지 궁금해한다), 검색 결과에서 콘텐츠 성과를 추적하기도 어려워질 수 있다. |
| 크롤링 빈도 | The canonical page will be crawled most regularly; duplicates are crawled less frequently in order to reduce the crawling load on sites.표준 페이지는 가장 자주 크롤링되고, 중복 페이지는 사이트의 크롤링 부담을 줄이려고 덜 자주 크롤링된다. |
| 크롤링 시간 | If many of these URLs are duplicates, or you don't want them crawled for some other reason (removed, unimportant, and so on), this wastes a lot of Google crawling time on your site.이 URL 중 다수가 중복이거나 다른 이유(삭제됨, 중요하지 않음 등)로 크롤링을 원하지 않는 URL이면 사이트의 구글 크롤링 시간이 많이 낭비된다. |
Eliminate duplicate content to focus crawling on unique content rather than unique URLs.
중복 콘텐츠를 없애 크롤링이 서로 다른 URL 이 아니라 서로 다른 콘텐츠에 쓰이게 합니다.
그래서 중복 URL은 지우기보다 하나로 모읍니다. 없앨 URL은 301 로, 남겨야 하는 URL은 캐노니컬로 표준 URL을 가리키게 합니다.
발견 04
B2B·B2C·B2G 는 중복이 생기는 자리가 다릅니다
예시 ① 제품 카탈로그를 둔 부품 제조사 사이트(B2B)
같은 제품이 용도별·규격별 분류 아래에서 서로 다른 URL로 열립니다. 이것은 사이트 안 중복 URL이고, 제품마다 표준 URL 하나를 정하면 됩니다.
대리점 사이트에 같은 설명을 줄 때는 원문 페이지를 우리 사이트에 먼저 공개합니다. 원문 페이지에는 사양표처럼 우리만 가진 1차 데이터를 둡니다.
예시 ② 제조사 상품 설명을 받아 쓰는 쇼핑몰(B2C)
색상·용량 옵션마다 URL이 갈리는 것은 사이트 안 중복 URL입니다. 기본 상품 페이지를 표준 URL로 정합니다.
제조사가 준 설명만 그대로 둔 페이지는 다른 판매처와 내용이 같습니다. 직접 찍은 사진, 실측 치수, 비교표처럼 이 쇼핑몰에만 있는 내용을 더합니다.
예시 ③ 같은 공지가 여러 게시판에 올라가는 공공기관 누리집(B2G)
같은 공지를 「공지사항」과 「알림마당」에 함께 올리면 두 URL이 같은 내용입니다. 원 게시판 URL을 표준으로 정하고 다른 쪽은 그 URL로 링크합니다.
그럼 우리 사이트의 중복은 어떤 순서로 정리하나요?
- 서치 콘솔 페이지 색인 생성 보고서에서 중복 페이지 상태로 묶인 URL을 뽑습니다.
- URL마다 위 판단 기준 7가지 중 어디에 해당하는지 적습니다.
- 사이트 안 중복 URL은 없앨 것은 301, 남길 것은 캐노니컬로 표준 URL에 모읍니다.
- 다른 사이트에서 옮긴 글은 자사 경험과 1차 데이터로 새로 쓰거나 내립니다.
- 몇 주 뒤 URL 검사 도구로 구글이 고른 표준 URL이 의도와 같은지 봅니다.
조사 방법
- Google Search Central 「What is canonicalization」 (문서 수정일 2026-08-20) · 최종 확인일 2026-10-25 · https://developers.google.com/search/docs/crawling-indexing/canonicalization
- Google Search Central 「How to specify a canonical URL with rel="canonical" and other methods」 (문서 수정일 2026-07-10) · 최종 확인일 2026-10-18 · https://developers.google.com/search/docs/crawling-indexing/consolidate-duplicate-urls
- Google Search Central 「Spam policies for Google web search」 (문서 수정일 2026-08-28) · 최종 확인일 2026-10-25 · https://developers.google.com/search/docs/essentials/spam-policies
- Google Crawling Infrastructure 「Optimize your crawl budget」 (문서 수정일 2026-07-22) · 최종 확인일 2026-10-25 · https://developers.google.com/crawling/docs/crawl-budget
- 판단 기준 7가지는 표준화 문서가 든 중복의 이유와 스팸 정책의 항목을 「사이트 안 중복 URL」과 「복사 글」로 나눠 묶은 것입니다. 묶는 방식은 편집 판단입니다.
- 예시 ①②③은 이해를 돕기 위해 만든 가상 상황이며, 실제 기업·기관의 사례가 아닙니다.
- 원문은 영어판(hl=en)이고, 용어와 도구 이름(표준 URL, 스크래핑, 확장된 콘텐츠 악용, 빈약한 제휴, 페이지 색인 생성 보고서, URL 검사 도구)은 같은 문서 한국어판(hl=ko) 표기를 따랐습니다.