Noindex: це директива, яка наказує пошуковим системам не показувати сторінку в результатах. Як її додати, коли використовувати і які помилки призводять до деіндексації сайтів.

Коротко
noindex: це директива, розміщена в мета-тегу robots або в HTTP-заголовку, яка просить пошукові системи сканувати сторінку, але не показувати її в результатах. Це надійний спосіб не пустити сторінку в індекс Google.
Хочете дізнатися більше? Запитайте
Noindex: це інструкція, яка наказує пошуковим системам не включати сторінку до свого індексу, а отже, не показувати її в результатах пошуку. Її задають або в HTML сторінки тегом <meta name="robots" content="noindex"> у head, або у відповіді HTTP заголовком X-Robots-Tag: noindex, який працює також для PDF та інших файлів, що не є HTML. Google, Bing та більшість інших систем її поважають.
Noindex: це точний інструмент: він прибирає URL з результатів, не роблячи його недоступним для користувачів. Сторінка подяки, сторінка результатів внутрішнього пошуку або сторінка входу можуть залишатися в мережі й бути корисними, залишаючись невидимими в Google. Якщо використати той самий тег помилково, увесь сайт може зникнути з пошуку за кілька днів, тому поводитися з ним слід обережно.
Пошукова система має просканувати сторінку, щоб прочитати її директиву noindex. Коли Googlebot завантажує URL і знаходить тег чи заголовок, він виключає сторінку з індексу або ніколи її не додає. Під час наступних сканувань сторінка залишається виключеною, доки директива присутня. У Google Search Console такі URL з'являються у звіті про індексацію сторінок під статусом «Виключено тегом noindex».
Оскільки системі потрібно побачити директиву, noindex працює лише на сторінках, які краулерам дозволено завантажувати. Якщо URL заблоковано в robots.txt, Google не може прочитати тег, і URL навіть може залишитися в індексі без опису, якщо на нього посилаються інші сайти. Google також припинив підтримувати рядки noindex усередині robots.txt у 2019 році: директива має бути на сторінці або в заголовку.
Ці три інструменти відповідають на різні запитання. Robots.txt керує скануванням: він просить ботів не завантажувати деякі URL, що економить краул-бюджет, але не гарантує деіндексації. Noindex керує індексацією: сторінку можна сканувати, але не показуватимуть. Канонічний тег опрацьовує дублікати: він повідомляє Google, яку версію схожих сторінок індексувати, і передає їй сигнали, не прибираючи інші зі сфери виявлення.
Просте правило: щоб об'єднати дублікати, використовуйте canonical; щоб не пустити корисну, але непошукову сторінку у результати, використовуйте noindex; щоб не дати ботам марнувати час на нескінченних URL, як-от деякі фільтри, використовуйте robots.txt, пам'ятаючи, що він не прибере ці URL з індексу.
Типові кандидати: сторінки, що обслуговують користувачів, але не мають цінності як результат пошуку: підтвердження замовлення та сторінки подяки, результати внутрішнього пошуку, сторінки акаунта й кошика, версії для друку, архіви тегів з кількома дописами та тестові середовища, які ніколи не повинні з'являтися. Тонкі сторінки, які ви плануєте покращити, також можна тимчасово закрити noindex, хоча зазвичай краще покращити чи об'єднати їх, як пояснює наша сторінка про тонкий контент.
Noindex не підходить для конфіденційного контенту. Сторінка залишається публічно доступною для всіх, хто має URL. Справжній захист вимагає автентифікації чи пароля.
У CMS використовуйте вбудовану опцію: більшість SEO-плагінів і конструкторів сайтів пропонують перемикач «приховати від пошукових систем» для кожної сторінки. У власному коді додайте мета-тег robots у head або налаштуйте сервер на надсилання заголовка X-Robots-Tag для папки чи типу файлів. Значення можна поєднувати, наприклад «noindex, follow», що залишає посилання сторінки доступними для сканування.
Потім перевірте результат: перевірте URL у Search Console, переконайтеся, що тег є у відрендереному HTML, і впевніться, що сторінку не заблоковано в robots.txt. Щоб швидко прибрати сторінку, інструмент видалення приховує її приблизно на шість місяців, поки набуває чинності noindex. Безкоштовна перевірка індексованості від Sorank показує, чи несе URL директиву noindex.
Найшкідливіша помилка: залишити активною опцію «відмовляти пошукові системи» після запуску сайту чи міграції: налаштування тестового середовища потрапляє у продакшн, і весь сайт деіндексується. Друга: поєднувати noindex із блокуванням у robots.txt, що не дає Google побачити тег. Третя: ставити noindex на сторінки, які також мають canonical на інший URL, що надсилає суперечливі сигнали. Нарешті, noindex для сторінок пагінації категорій чи важливих фільтрів може відрізати краулерів від товарів, які вони перелічують.
Для SEO noindex підтримує індекс чистим: менше малоцінних URL означає, що пошукові системи зосереджуються на сторінках, які заслуговують на ранжування. Для GEO ефект прямий. AI-асистенти, як-от пошук ChatGPT чи Perplexity, спираються на вебіндекси, зокрема індекс Bing, щоб знаходити джерела. Сторінка, виключена через noindex, зазвичай відсутня в цих індексах і не може бути процитована. Перевірка того, що ваші ключові сторінки індексуються, є передумовою будь-якої видимості в AI.
Noindex повідомляє пошуковим системам не показувати сторінку в результатах. Він працює через мета-тег robots або заголовок X-Robots-Tag, вимагає, щоб сторінка була доступна для сканування, і підходить для сторінок, корисних відвідувачам, але марних у пошуку. Якщо застосовувати обережно, він тримає індекс сфокусованим; якщо залишити ввімкненим помилково, може стерти сайт з Google.
Щоб заглибитися, прочитайте наші сторінки про індексацію та robots.txt. Джерела: Google про блокування індексації за допомогою noindex і специфікації мета-тегу robots від Google.
Джерела
Сторінка видаляється після того, як Googlebot повторно просканує її й побачить директиву, що може тривати від кількох днів до кількох тижнів залежно від частоти сканування. Запит на повторне сканування через інструмент перевірки URL прискорює процес, а інструмент видалення може тимчасово приховати URL тим часом.
Ні. Якщо сторінку заблоковано в robots.txt, Google не може її просканувати й ніколи не бачить тегу noindex, тож URL може залишитися в індексі. Тримайте сторінки з noindex доступними для сканування, доки їх не буде видалено.
Вона просить пошукові системи не індексувати сторінку, продовжуючи переходити за посиланнями, які вона містить. Це поширене налаштування для архівних або службових сторінок, посилання яких ведуть на контент, який ви хочете сканувати. Follow є поведінкою за замовчуванням, тож саме «noindex» має той самий ефект для посилань.
ВОНИ ПРОБУВАЛИ SORANK ДО ВАС
