„Crawled - currently not indexed”: co oznacza i jak to naprawić

Crawled - currently not indexed to jeden z powodów wymienionych w Search Console w sekcji „Dlaczego strony nie są indeksowane”, często największy na serwisach z treściami i w sklepach internetowych. Dokumentacja raportu Indeksowanie stron Google opisuje ten status dwoma zdaniami: „Strona została przeszukana przez Google, ale nie została zindeksowana. Może zostać zindeksowana w przyszłości lub nie; nie trzeba ponownie zgłaszać tego adresu URL do przeszukania.” Ten przewodnik wyjaśnia, co zdecydował Google, które adresy URL mogą pozostać w tym statusie, jak znaleźć prawdziwą przyczynę przy tych, które mają znaczenie, i która poprawka pasuje do której przyczyny.

Co oznacza „Crawled - currently not indexed”?

Google obsługuje adres URL w trzech etapach: odkrywanie i przeszukiwanie, następnie indeksowanie i na końcu pozycjonowanie (nasz wpis w słowniku o przeszukiwaniu i indeksowaniu opisuje każdy z nich). Strona w tym statusie przeszła pierwszy etap: Googlebot zażądał strony i otrzymał odpowiedź. Utknęła na drugim: po przetworzeniu treści Google zdecydował, że jej nie zapisze w indeksie.

Ta decyzja jest celowa i udokumentowana. Przewodnik Google o działaniu wyszukiwarki stwierdza: „Indeksowanie nie jest gwarantowane; nie każda strona przetworzona przez Google zostanie zindeksowana.” Wymienia trzy częste powody: niską jakość treści, reguły robots w metatagach zakazujące indeksowania oraz strukturę witryny utrudniającą indeksowanie. Ponieważ reguła noindex tworzy osobny status („Wykluczono przez tag „noindex””), strona wymieniona jako przeszukana, ale nie zindeksowana wskazuje przede wszystkim na pierwszy i trzeci powód.

Trzy rzeczy warte zapamiętania:

• To nie jest kara. Nie chodzi o ręczne działanie, a reszta witryny nie jest za to karana.
• To nie jest ostateczne. Google pisze, że strona „może zostać zindeksowana w przyszłości lub nie”. Każde kolejne przeszukanie to nowa decyzja.
• Może dotyczyć stron, które wcześniej były zindeksowane. Google regularnie usuwa adresy URL, których nie uważa już za warte zachowania, więc stary artykuł może przejść do tego statusu bez żadnej zmiany z Twojej strony.

Cały proces indeksowania i dźwignie, które go przyspieszają, opisuje nasz przewodnik po indeksowaniu w Google.

Crawled czy Discovered - currently not indexed: jaka jest różnica?

Oba statusy są podobne, ale zatrzymują się na różnych etapach, więc wymagają różnych rozwiązań.

Krótko mówiąc, „Discovered” to głównie problem przeszukiwania, a „Crawled” to głównie decyzja o indeksowaniu. Szybszy serwer rzadko przenosi przeszukaną stronę do indeksu; poprawa samej strony już tak.

Czy to problem, czy można zostawić te adresy URL w spokoju?

Każda witryna większego rozmiaru ma adresy URL w tym statusie, a wiele z nich nigdy nie powinno się pozycjonować. Zanim cokolwiek poprawisz, posortuj listę według typu adresu URL. Stała liczba adresów o niskiej wartości nie jest powodem do niepokoju; nagły wzrost albo ważne strony na liście już tak.

Dlaczego Google przeszukuje stronę, ale jej nie indeksuje?

1. Treść wnosi zbyt mało

To najczęstsza przyczyna. Strony z kilkoma zdaniami tekstu, ogólne treści powtarzające to, co mówią już dziesiątki zindeksowanych stron, albo strony zbudowane z szablonu, w którym zmieniono tylko nazwę, to typowa treść cienka. Wytyczne Google dotyczące tworzenia pomocnych treści pytają, czy strona oferuje „znaczną wartość w porównaniu z innymi stronami w wynikach wyszukiwania”. Strona, która nie przechodzi tego testu, może być przeszukiwana wielokrotnie, nie trafiając do indeksu.

2. Strona jest zbyt podobna do innej

Prawie duplikaty (warianty produktu z tym samym opisem, strony miast, które zmieniają tylko nazwę miasta, wersje do druku) są często grupowane i pomijane. Gdy Google wyraźnie wykryje duplikat, zwykle widać status kanoniczny; przy częściowym podobieństwie strona może trafić tutaj. Spójny tag canonical i naprawdę odrębna treść rozstrzygają sprawę.

3. Treść istnieje dopiero po uruchomieniu JavaScriptu

Podstawy SEO dla JavaScriptu według Google opisują trzy fazy: przeszukiwanie, renderowanie i indeksowanie, i zauważają, że strona czekająca na renderowanie „może pozostać w tej kolejce kilka sekund, ale może to potrwać dłużej”. Jeśli surowy HTML jest prawie pusty, a tekst pojawia się dopiero po renderowaniu (albo renderowanie nie powiedzie się, bo skrypt lub wywołanie API jest zablokowane), Google może ocenić prawie pustą stronę. Renderowanie po stronie serwera lub prerenderowanie usuwa to ryzyko; nasz przewodnik po SEO JavaScript omawia te opcje.

4. Witryna sygnalizuje, że strona jest mało ważna

Strona dostępna tylko z mapy witryny albo ukryta pięć kliknięć w głąb, z jednym linkiem z paginowanego archiwum, mówi Google, że dla Ciebie ma małe znaczenie. Linki wewnętrzne z zindeksowanych, odwiedzanych stron to jeden z najmocniejszych sygnałów, jakie kontrolujesz.

5. Inne przypadki

Niektóre adresy pojawiają się tutaj z powodów spoza strony: raport jest opóźniony (adres może być już zindeksowany), cel przekierowania został przeszukany przez stary adres, albo miękkie błędy 404 (puste wyniki wyszukiwania, „nie znaleziono produktów”) zwracają kod 200. Te przypadki wymagają sprawdzenia, a nie przepisania.

Jak krok po kroku zdiagnozować „Crawled - currently not indexed”

1. Otwórz raport. W Search Console przejdź do Indeksowanie, potem do Strony i kliknij „Crawled - currently not indexed” w sekcji „Dlaczego strony nie są indeksowane”. Zwróć uwagę na trend: nagły skok często następuje po migracji, zmianie motywu albo serii nowych stron.
2. Posortuj adresy URL według typu za pomocą tabeli powyżej i zachowaj tylko strony, które mają być widoczne w wynikach wyszukiwania.
3. Sprawdź każdy ważny adres URL. Wklej go w narzędziu do sprawdzania adresów URL. Potwierdź status, datę ostatniego przeszukania oraz to, że przeszukiwanie i indeksowanie są dozwolone. Stronę możesz też sprawdzić w kilka sekund za pomocą naszego bezpłatnego sprawdzacza indeksowalności.
4. Odrzuć fałszywe alarmy. Jeśli pojawia się „URL jest w Google”, raport jest opóźniony, a strona nie potrzebuje niczego.
5. Przetestuj adres na żywo i obejrzyj wyrenderowany HTML. Jeśli w wersji wyrenderowanej brakuje głównego tekstu, linków lub tytułu, problem leży w renderowaniu.
6. Porównaj z pozycjonującymi się stronami. Wyszukaj docelowe zapytanie i przeczytaj czołowe wyniki. Jeśli odpowiadają pełniej albo w innym formacie, Twoja strona ma lukę jakościową lub w intencji.
7. Policz linki wewnętrzne prowadzące do strony, na przykład naszym analizatorem linków wewnętrznych. Zero albo jeden link z głębokich stron to słaby sygnał.

Jak to naprawić: jedna poprawka na jedną przyczynę

Dwa nawyki sprawiają, że poprawki się utrzymują. Po pierwsze, regularny audyt treści: przycinanie lub łączenie słabych stron podnosi średnią jakość tego, co Google przeszukuje. Po drugie, utrzymuj czystą mapę witryny XML, z tylko kanonicznymi, indeksowalnymi adresami, które chcesz pozycjonować, i ponownie zgłoś ją do Google po dużym porządkowaniu.

Jak długo trwa indeksowanie strony po poprawce?

Nic się nie dzieje, dopóki Googlebot nie przeszuka strony ponownie, co może zająć od kilku dni do kilku tygodni, w zależności od tego, jak często Google odwiedza Twoją witrynę. Gdy kilka adresów zostanie poprawionych, możesz kliknąć „Potwierdź naprawę” w raporcie; Google pisze, że potwierdzenie „zwykle trwa około dwóch tygodni, ale w niektórych przypadkach może potrwać znacznie dłużej”. Potwierdzenie jest opcjonalne: raport aktualizuje się sam, gdy strony są przeszukiwane ponownie.

W dużej witrynie sprawdzanie adresów po kolei jest powolne. Interfejs API do sprawdzania adresów URL pozwala według limitów użycia API Search Console na 2000 zapytań dziennie i 600 na minutę dla każdej witryny, co wystarcza do śledzenia kilkuset priorytetowych stron w czasie. Jeśli strona pozostaje w tym statusie po dwóch lub trzech kolejnych przeszukaniach, poprawka nie wystarczyła: najpierw przyjrzyj się jakości i intencji.

Dlaczego to ważne dla SEO i widoczności w asystentach AI?

Strona spoza indeksu Google nie przynosi organicznych kliknięć, bez względu na jej jakość. W serwisie z treściami duży udział artykułów w tym statusie oznacza też zmarnowany wysiłek produkcyjny i sygnalizuje Google, że witryna publikuje strony, których nie potrzebuje, co może spowolnić indeksowanie nowych.

Asystenci AI dodają drugi powód. ChatGPT, Perplexity i Gemini odpowiadają na wiele pytań, pobierając strony z indeksów wyszukiwarek internetowych, a potem cytują wykorzystane źródła. Strona niezindeksowana ma znacznie mniejsze szanse na pobranie, a więc i na cytowanie. Nasze badanie o platformach, które AI cytują najczęściej, pokazuje, jakie źródła preferują przy odpowiedziach.

Sorank to nasz produkt: oprogramowanie SEO i GEO działające na autopilocie. Jego panel GEO i SEO pokazuje kliknięcia, wyświetlenia i pozycje z Search Console, dzięki czemu widzisz, kiedy poprawione strony zaczynają mieć wyświetlenia, a generator artykułów pisze artykuły z źródłami i już osadzonymi linkami wewnętrznymi, czyli dwoma elementami, które ten status najczęściej karze.

W skrócie: posortuj adresy URL, zignoruj te, które nie powinny się pozycjonować, i napraw przyczynę na stronach, które mają znaczenie (treść, duplikaty, renderowanie, linki wewnętrzne), zanim poprosisz Google o ponowne spojrzenie. Aby publikować od razu strony, które są indeksowane i cytowane, zobacz plany Sorank, od $49 miesięcznie, z 3-dniowym bezpłatnym okresem próbnym.