Скановано, але наразі не проіндексовано: що це означає і як виправити

Скановано, але наразі не проіндексовано входить до переліку причин, які Search Console показує в розділі «Чому сторінки не індексуються», і на контентних сайтах та в інтернет-магазинах це часто найбільша група. У документації до звіту «Індексування сторінок» Google описує цей статус двома реченнями: «Сторінку просканував Google, але не проіндексував. Її можна буде проіндексувати в майбутньому, а можна й ні; повторно надсилати цей URL для сканування не потрібно». У цьому гайді пояснюється, що вирішив Google, які URL можуть залишатися в цьому статусі, як знайти справжню причину для важливих сторінок і яке виправлення підходить до кожної причини.

Що означає «Скановано, але наразі не проіндексовано»?

Google обробляє URL у три етапи: виявлення та сканування, потім індексування й, нарешті, ранжування (наш запис у глосарії про сканування та індексування докладно описує кожен етап). Сторінка в цьому статусі пройшла перший етап: Googlebot запросив її й отримав відповідь. Вона зупинилася на другому: після обробки контенту Google вирішив не зберігати його в індексі.

Це рішення свідоме й задокументоване. Гайд Google про принципи роботи пошуку прямо каже: «Індексування не гарантується; не кожна сторінка, яку обробляє Google, потрапляє до індексу». Там названо три поширені причини: низька якість контенту, правила robots у мета-тегах, що забороняють індексування, і структура сайту, яка ускладнює індексування. Оскільки правило noindex створює окремий статус («Виключено тегом «noindex»»), сторінка, позначена як просканована, але не проіндексована, вказує насамперед на першу й третю причини.

Три речі, які варто пам'ятати:

• Це не санкція. Ручних заходів немає, і решта сайту за це не карається.
• Це не остаточно. Google пише, що сторінку «можна буде проіндексувати в майбутньому, а можна й ні». Кожне нове сканування: це нове рішення.
• Це може торкнутися сторінок, які раніше були в індексі. Google регулярно видаляє URL, які більше не вважає вартими збереження, тож стара стаття може перейти в цей статус без жодних змін з вашого боку.

Увесь процес індексування та важелі, які його прискорюють, описані в нашому гайді з індексування в Google.

Скановано чи Виявлено, але не проіндексовано: у чому різниця?

Ці два статуси схожі, але зупиняються на різних етапах, тож і виправляти їх потрібно по-різному.

Коротко: «Виявлено»: це переважно проблема сканування, а «Скановано», переважно рішення про індексування. Прискорення сервера рідко переносить відскановану сторінку в індекс; покращення самої сторінки, переносить.

Це проблема, чи такі URL можна залишити в спокої?

Кожен сайт помірного розміру має URL у цьому статусі, і багато з них ніколи не мають ранжуватися. Перш ніж щось виправляти, відсортуйте список за типом URL. Стабільна кількість малоцінних URL, не привід для занепокоєння; різке зростання або важливі сторінки у списку, привід.

Чому Google сканує сторінку, але не індексує її?

1. Контент додає надто мало

Це найпоширеніша причина. Типовий «тонкий контент», сторінки з кількох рядків тексту, загальний контент, що повторює те, що вже сказано на десятках проіндексованих сторінок, або сторінки, створені за шаблоном, де змінили лише назву. Рекомендації Google щодо створення корисного контенту запитують, чи дає сторінка «суттєву цінність порівняно з іншими сторінками в результатах пошуку». Сторінка, яка не проходить цю перевірку, може сканується знову й знову, так і не потрапивши в індекс.

2. Сторінка занадто схожа на іншу

Майже однакові сторінки (варіанти товару з однаковим описом, сторінки міст, де змінюється лише назва міста, версії для друку) часто групуються й виключаються. Коли Google чітко визначає дублікат, зазвичай з'являється статус канонічної версії; за часткової схожості сторінка може опинитися тут. Послідовний canonical-тег і справді самостійний контент розв'язують питання.

3. Контент з'являється лише після виконання JavaScript

В основах SEO для JavaScript Google описує три фази: сканування, рендеринг і індексування, і зазначає, що сторінка в очікуванні рендерингу «може залишатися в цій черзі кілька секунд, а іноді й довше». Якщо початковий HTML майже порожній, а текст з'являється лише після рендерингу (або рендеринг не вдається, бо скрипт чи виклик API заблоковано), Google може оцінити майже порожню сторінку. Серверний рендеринг або попередня генерація усувають цей ризик; наш гайд з SEO для JavaScript описує варіанти.

4. Сайт показує, що сторінка неважлива

Сторінка, доступна лише з карти сайту або схована на п'ять кліків углиб з єдиним посиланням із пагінованого архіву, каже Google, що для вас вона мало важить. Внутрішні посилання з проіндексованих і відвідуваних сторінок, один із найсильніших сигналів, яким ви керуєте.

5. Інші випадки

Деякі URL потрапляють сюди з причин, не пов'язаних зі сторінкою: звіт відстає (URL може вже бути в індексі), ціль переспрямування сканувалася через старий URL, або м'які помилки (порожні результати пошуку, «товарів не знайдено») повертають код 200. Такі випадки потребують перевірки, а не переписування.

Діагностика «Скановано, але наразі не проіндексовано» крок за кроком

1. Відкрийте звіт. У Search Console перейдіть до розділу «Індексування», потім «Сторінки» і натисніть «Скановано, але наразі не проіндексовано» в розділі «Чому сторінки не індексуються». Зверніть увагу на динаміку: різкий стрибок часто йде за міграцією, зміною теми або пакетом нових сторінок.
2. Відсортуйте URL за типом за допомогою таблиці вище й залиште лише сторінки, які мають бути в результатах пошуку.
3. Перевірте кожен важливий URL. Вставте його в інструмент перевірки URL. Підтвердьте статус, дату останнього сканування і те, що сканування та індексування дозволені. Сторінку також можна перевірити за кілька секунд нашою безкоштовною перевіркою індексованості.
4. Відсіюйте хибні спрацьовування. Якщо з'явилося «URL є в Google», звіт відстає, і сторінка нічого не потребує.
5. Перевірте живий URL і подивіться відрендерений HTML. Якщо у відрендереній версії немає основного тексту, посилань або заголовка, проблема в рендерингу.
6. Порівняйте зі сторінками, які ранжуються. Знайдіть цільовий запит і прочитайте перші результати. Якщо вони відповідають повніше або в іншому форматі, у вашій сторінки є прогалина в якості або в інтенції.
7. Порахуйте внутрішні посилання на сторінку, наприклад за допомогою нашого аналізатора внутрішніх посилань. Нуль або одне посилання з глибоких сторінок, слабкий сигнал.

Як виправити: одне виправлення на одну причину

Дві звички роблять виправлення стійкими. По-перше, регулярний аудит контенту: обрізання або об'єднання слабких сторінок підвищує середню якість того, що сканує Google. По-друге, чиста XML-карта сайту, лише з канонічними індексованими URL, які ви хочете ранжувати, і повторне надсилання її в Google після великого прибирання.

Скільки часу триває індексування сторінки після виправлення?

Нічого не станеться, доки Googlebot не просканує сторінку знову, а це може тривати від кількох днів до кількох тижнів залежно від того, як часто Google відвідує ваш сайт. Коли виправлено кілька URL, можна натиснути «Перевірити виправлення» у звіті; Google пише, що перевірка «зазвичай триває близько двох тижнів, але в деяких випадках може тривати набагато довше». Перевірка необов'язкова: звіт оновлюється сам, коли сторінки скануються повторно.

Для великого сайту перевіряти URL по одному повільно. За обмеженнями використання API Search Console API перевірки URL дозволяє 2000 запитів на день і 600 на хвилину для кожного сайту, цього вистачить, щоб стежити за кількома сотнями пріоритетних сторінок. Якщо сторінка залишається в цьому статусі після двох-трьох повторних сканувань, виправлення було недостатнім: спершу перегляньте якість і інтенцію.

Чому це важливо для SEO та видимості в ШІ-асистентах?

Сторінка поза індексом Google не приносить органічних кліків, якою б якісною вона не була. На контентному сайті велика частка статей у цьому статусі означає також витрачені даремно зусилля на виробництво і сигналізує Google, що сайт публікує сторінки, яких йому не треба; це може сповільнити індексування нових.

ШІ-асистенти додають другу причину. ChatGPT, Perplexity і Gemini відповідають на багато запитань, витягуючи сторінки з індексів веб-пошуку, а потім цитують використані джерела. Неіндексована сторінка значно рідше витягується і, відповідно, значно рідше цитується. Наше дослідження про платформи, які ШІ цитує найчастіше, показує, які джерела вони віддають перевагу у відповідях.

Sorank, наш продукт: програмне забезпечення для SEO та GEO в режимі autopilot. Його панель GEO і SEO показує кліки, покази та позиції з Search Console, тож ви бачите, коли виправлені сторінки починають отримувати покази, а генератор статей пише статті з джерелами та вже вбудованими внутрішніми посиланнями, тобто з двома елементами, за відсутність яких цей статус карає найчастіше.

Підсумок: відсортуйте URL, ігноруйте ті, що не мають ранжуватися, і усуньте причину на важливих сторінках (контент, дублікати, рендеринг, внутрішні посилання), перш ніж просити Google подивитися ще раз. Щоб публікувати сторінки, які одразу індексуються і цитуються, дивіться тарифи Sorank: від 49€ на місяць, із 3-денним безкоштовним пробним періодом.