noindex는 검색엔진에 페이지를 결과에 표시하지 말라고 지시하는 지시어입니다. 추가 방법, 사용 시점, 사이트가 색인에서 빠지는 실수를 정리합니다.
도구
요약
noindex는 meta robots 태그나 HTTP 헤더에 넣는 지시어로, 검색엔진이 페이지를 크롤링하되 결과에는 표시하지 않도록 요청합니다. 페이지를 Google 색인에서 제외하는 확실한 방법입니다.
더 알아보고 싶다면 물어보세요
noindex는 검색엔진에 페이지를 색인에 포함하지 말고, 따라서 검색 결과에 보여 주지 말라고 요청하는 지시입니다. 페이지 HTML의 head에 <meta name="robots" content="noindex">를 넣거나, HTTP 응답에 X-Robots-Tag: noindex 헤더를 보내는 방식으로 설정하며, 후자는 PDF 같은 비HTML 파일에도 쓸 수 있습니다. Google, Bing 등 대부분의 검색엔진이 이를 따릅니다.
noindex는 사용자의 접근은 막지 않으면서 URL을 검색 결과에서 뺍니다. 감사 페이지, 사이트 내 검색 결과, 로그인 페이지는 계속 운영하면서 Google에서는 보이지 않게 할 수 있습니다. 실수로 설정하면 같은 태그 때문에 사이트 전체가 며칠 만에 검색에서 사라질 수도 있습니다.
검색엔진은 페이지를 크롤링해야 이 지시를 읽을 수 있습니다. Googlebot이 태그나 헤더를 발견하면 페이지를 색인에서 제거하거나 처음부터 추가하지 않습니다. Google Search Console의 페이지 색인 보고서에는 "noindex 태그에 의해 제외됨"으로 표시됩니다. URL이 robots.txt에서 차단되어 있으면 Google은 태그를 읽지 못하고 URL이 색인에 남을 수도 있습니다. 또한 Google은 2019년부터 robots.txt 안의 noindex 규칙을 지원하지 않습니다.
robots.txt는 크롤링을 제어해 크롤 예산을 아끼지만 색인 제외를 보장하지는 않습니다. noindex는 색인을 제어합니다. canonical 태그는 중복을 처리하며 어떤 버전을 색인할지 알려 줍니다. 중복에는 canonical, 사용자에게는 유용하지만 검색에는 필요 없는 페이지에는 noindex, 일부 필터처럼 끝없이 생기는 URL에는 robots.txt가 기본 원칙입니다.
대표적인 대상은 주문 확인 및 감사 페이지, 사이트 내 검색 결과, 계정과 장바구니, 인쇄용 페이지, 글이 적은 태그 아카이브, 테스트 환경입니다. 내용이 빈약한 페이지를 일시적으로 noindex 처리할 수도 있지만, 대개는 보강하거나 통합하는 편이 낫습니다. 자세한 내용은 얇은 콘텐츠 항목을 참고하세요. noindex는 기밀 보호 수단이 아니며 URL을 아는 사람은 누구나 볼 수 있습니다.
CMS에서는 "검색엔진에서 숨기기" 같은 옵션을 사용합니다. 직접 개발한 사이트라면 head에 meta robots 태그를 넣거나 서버에서 X-Robots-Tag 헤더를 보내도록 설정합니다. "noindex, follow"처럼 값을 조합할 수도 있습니다. 이후 Search Console에서 URL을 검사하고 robots.txt에서 차단되지 않았는지 확인하세요. Sorank의 무료 색인 가능성 검사 도구로 URL에 noindex가 있는지 확인할 수 있습니다.
가장 치명적인 실수는 사이트 오픈이나 이전 후에도 "검색엔진이 이 사이트를 색인하지 않도록 요청" 옵션을 켜 두어 사이트 전체가 색인에서 빠지는 것입니다. 그 밖에 noindex와 robots.txt 차단을 함께 쓰는 것, 다른 URL로 canonical을 지정한 페이지에 noindex를 넣는 것, 페이지가 나뉜 카테고리에 noindex를 적용해 크롤러가 상품에 닿지 못하게 하는 것이 있습니다.
SEO에서 noindex는 색인을 깔끔하게 유지해 검색엔진이 순위에 오를 만한 페이지에 집중하도록 합니다. GEO에서는 영향이 더 직접적입니다. ChatGPT 검색이나 Perplexity 같은 AI는 Bing을 포함한 웹 색인에서 출처를 찾기 때문에, noindex로 제외된 페이지는 보통 그곳에 없고 인용될 수도 없습니다.
noindex는 검색엔진에 페이지를 결과에 표시하지 말라고 요청합니다. meta robots 태그나 X-Robots-Tag 헤더로 설정하며, 페이지가 크롤링 가능해야 하고, 방문자에게는 유용하지만 검색에는 불필요한 페이지에 적합합니다.
더 알아보려면 색인과 robots.txt 항목을 참고하세요. 참고 자료: noindex로 색인 생성 차단에 관한 Google 문서, robots meta 태그 사양.
출처
Googlebot이 페이지를 다시 크롤링해 지시를 확인한 뒤 제거되며, 크롤링 빈도에 따라 며칠에서 몇 주가 걸립니다. URL 검사 도구로 재크롤링을 요청하면 더 빨라집니다.
아니요. 차단하면 Google이 페이지를 크롤링하지 못해 noindex 태그를 보지 못하고 URL이 색인에 남을 수 있습니다. 제거될 때까지는 크롤링 가능한 상태로 두세요.
페이지는 색인하지 않되 페이지 안의 링크는 따라가라는 뜻으로, 아카이브나 기능 페이지에서 흔히 씁니다. follow가 기본 동작이므로 "noindex"만 써도 링크에 대한 효과는 같습니다.
먼저 Sorank를 경험한 사람들
“2년 동안 제 고객의 100%는 LinkedIn에서 왔습니다. 매일 게시물을 올리고, 댓글을 달고, DM으로 후속 연락을 하고… 알고리즘에 완전히 의존하는 방식이었습니다. SEO를 해야 한다는 것은 알았지만 늘 미뤘습니다. 시간이 오래 걸리고, 너무 기술적이며, 제 일이 아니라고 생각했기 때문입니다. Sorank와 함께 드디어 첫걸음을 내디뎠습니다. 4개월 만에 아무것도 게시하지 않고도 매달 15건의 오가닉 리드를 확보하고 있습니다. 아직 LinkedIn과 50 대 50은 아니지만, 자동 운영으로 성장하는 두 번째 리드 채널이 생겼다는 사실에 훨씬 마음이 놓입니다.”
Valentin Thomy콜드메일 대행사“Sorank는 저희가 고객사에 제공하는 성과를 완전히 바꿔 놓았습니다. 이제 AI가 실제로 사용하는 키워드를 파악하고, 특정 경쟁사가 인용되는 이유를 이해하며, 이전에는 전혀 보지 못했던 기회를 발견합니다. 고객사는 더 빠른 순위 상승, AI 답변에서의 더 나은 가시성, 그리고 실행하는 모든 작업에 대한 더 명확한 ROI를 확인합니다.”
Benjamin Rouxovirank.com
“저는 마케터가 아니라 개발자입니다. 제 Shopify 테마는 입소문과 광고로만 팔리고 있었습니다. Sorank 덕분에 드디어 SEO를 어떻게 구조화하고 상위에 노출되는 글을 어떻게 써야 하는지 이해했습니다. 진단 결과 제품 페이지가 너무 느리다는 사실이 드러났습니다. 2개월 만에 오가닉 트래픽이 두 배가 되었고, 사람들이 Shopify 테마를 검색할 때 ChatGPT 답변에 등장하기 시작했습니다. 그 모든 것을 주당 약 2시간으로 해냈습니다.”
Thème FullStackthemefullstack.com“Sorank는 저희 SEO 대행사의 운영 방식을 완전히 바꿔 놓았습니다. 모든 것이 한곳에 모이고 자동화되어 고객사마다 들이는 시간이 훨씬 줄었습니다. 예전에 몇 시간씩 걸리던 작업이 이제 몇 분이면 끝나고, 덕분에 드디어 사업 안에서 일하는 것을 멈추고 사업 위에서 일하기 시작할 수 있게 되었습니다.”
Océane Bondismaison-leverage.com
