“Crawled - currently not indexed”: wat het betekent en hoe je het oplost

Crawled - currently not indexed staat in Search Console onder “Waarom pagina's niet zijn geïndexeerd” en is op contentsites en webwinkels vaak de grootste groep. De documentatie van het rapport Paginaindexering van Google beschrijft de status in twee zinnen: “De pagina is door Google gecrawld maar niet geïndexeerd. Ze kan in de toekomst wel of niet worden geïndexeerd; het is niet nodig deze URL opnieuw voor crawling in te dienen.” Deze gids legt uit wat Google heeft besloten, welke URL's in deze status mogen blijven, hoe je de echte oorzaak vindt bij de URL's die ertoe doen, en welke oplossing bij welke oorzaak past.

Wat betekent “Crawled - currently not indexed”?

Google verwerkt een URL in drie fasen: ontdekking en crawling, dan indexering en tot slot rangschikking (ons woordenlijstitem over crawling en indexering beschrijft elke fase). Een pagina in deze status is de eerste fase al voorbij: Googlebot heeft de pagina opgevraagd en een antwoord gekregen. Ze bleef steken in de tweede fase: na het verwerken van de inhoud heeft Google besloten die niet in de index op te slaan.

Die keuze is bewust en gedocumenteerd. De gids van Google over hoe Zoeken werkt stelt dat “indexering niet gegarandeerd is; niet elke pagina die Google verwerkt, wordt geïndexeerd”. Er worden drie veelvoorkomende redenen genoemd: lage inhoudskwaliteit, robots-regels in de meta-tags die indexering verbieden, en een sitestructuur die indexering moeilijk maakt. Omdat een noindex-regel een eigen status geeft (“Uitgesloten door de ‘noindex’-tag”), wijst een pagina die als gecrawld maar niet geïndexeerd staat vooral naar de eerste en de derde reden.

Drie punten om te onthouden:

• Het is geen straf. Er is geen handmatige maatregel in het spel, en de rest van de site wordt er niet voor gestraft.
• Het is niet definitief. Google zegt dat de pagina “in de toekomst wel of niet kan worden geïndexeerd”. Bij elke nieuwe crawl wordt opnieuw beslist.
• Het kan pagina's treffen die vroeger wel waren geïndexeerd. Google verwijdert regelmatig URL's die het niet meer de moeite waard vindt om te bewaren, dus een oud artikel kan in deze status belanden zonder dat jij iets hebt veranderd.

Voor het hele indexeringsproces en de hefbomen die het versnellen, zie onze gids over Google-indexering.

Crawled of Discovered - currently not indexed: wat is het verschil?

De twee statussen lijken op elkaar, maar ze stoppen in verschillende fasen, dus ze vragen om verschillende oplossingen.

Kort gezegd is “Discovered” vooral een crawlprobleem en is “Crawled” vooral een indexeringsbeslissing. Een snellere server brengt een gecrawlde pagina zelden in de index; de pagina zelf verbeteren wel.

Is het een probleem, of kun je deze URL's laten staan?

Elke site van enige omvang heeft URL's in deze status, en veel daarvan zouden nooit moeten ranken. Sorteer de lijst op URL-type voordat je iets aanpast. Een stabiel aantal URL's met weinig waarde is geen reden tot zorg; een plotselinge stijging, of belangrijke pagina's in de lijst, wel.

Waarom crawlt Google een pagina maar indexeert hij die niet?

1. De inhoud voegt te weinig toe

Dit is de meest voorkomende oorzaak. Pagina's met een paar regels tekst, generieke inhoud die herhaalt wat tientallen geïndexeerde pagina's al zeggen, of pagina's die uit een sjabloon zijn gemaakt waarin alleen een naam is veranderd, zijn typische dunne inhoud. De richtlijnen van Google voor het maken van nuttige inhoud vragen of een pagina “substantiële waarde biedt vergeleken met andere pagina's in de zoekresultaten”. Een pagina die die toets niet doorstaat, kan steeds opnieuw worden gecrawld zonder geïndexeerd te raken.

2. De pagina lijkt te veel op een andere

Bijna-duplicaten (productvarianten met dezelfde beschrijving, plaatspagina's die alleen de plaatsnaam verwisselen, printvriendelijke versies) worden vaak gegroepeerd en weggelaten. Als Google het duplicaat duidelijk herkent, zie je meestal een canonieke status; bij gedeeltelijke gelijkenis kan de pagina hier terechtkomen. Een consistente canonical-tag en echt verschillende inhoud maken een einde aan de vraag.

3. De inhoud bestaat pas nadat JavaScript is uitgevoerd

De basisprincipes van JavaScript-SEO van Google beschrijven drie fasen: crawling, rendering en indexering. Ze stellen dat een pagina die op rendering wacht “enkele seconden in die wachtrij kan blijven, maar ook langer”. Als de ruwe HTML bijna leeg is en de tekst pas na rendering verschijnt (of de rendering mislukt omdat een script of API-aanroep is geblokkeerd), beoordeelt Google mogelijk een bijna lege pagina. Rendering aan de serverkant of vooraf renderen haalt dat risico weg; onze gids over JavaScript-SEO behandelt de opties.

4. De site geeft aan dat de pagina niet belangrijk is

Een pagina die alleen via de sitemap bereikbaar is, of vijf klikken diep ligt met één link vanuit een gepagineerd archief, vertelt Google dat ze jou weinig waard is. Interne links vanaf geïndexeerde, bezochte pagina's zijn een van de sterkste signalen die je zelf in de hand hebt.

5. Andere gevallen

Sommige URL's verschijnen hier om redenen buiten de pagina: het rapport loopt achter (de URL kan al geïndexeerd zijn), een redirectdoel is via de oude URL gecrawld, of soft-404-pagina's (lege zoekresultaten, “geen producten gevonden”) geven een 200-statuscode terug. Die gevallen vragen om controle, niet om een herschrijving.

Stap voor stap diagnosticeren wat “Crawled - currently not indexed” betekent

1. Open het rapport. Ga in Search Console naar Indexering, dan naar Pagina's, en klik onder “Waarom pagina's niet zijn geïndexeerd” op “Crawled - currently not indexed”. Let op de trend: een plotselinge stijging volgt vaak op een migratie, een themawijziging of een reeks nieuwe pagina's.
2. Sorteer de URL's op type met de tabel hierboven, en houd alleen de pagina's over die je in zoekresultaten wilt zien.
3. Inspecteer elke belangrijke URL. Plak haar in de URL-inspectietool. Bevestig de status, de datum van de laatste crawl, en dat crawlen en indexeren zijn toegestaan. Je kunt een pagina ook in seconden testen met onze gratis indexeerbaarheidscheck.
4. Sluit valse meldingen uit. Staat er “URL staat op Google”, dan loopt het rapport achter en heeft de pagina niets nodig.
5. Test de live-URL en bekijk de gerenderde HTML. Ontbreken de hoofdtekst, links of titel in de gerenderde versie, dan ligt het probleem bij de rendering.
6. Vergelijk met de pagina's die wel ranken. Zoek de doelzoekopdracht en lees de topresultaten. Beantwoorden ze de vraag vollediger of in een ander formaat, dan heeft jouw pagina een kwaliteits- of intentiekloof.
7. Tel de interne links naar de pagina, bijvoorbeeld met onze analyzer voor interne links. Nul of één link vanaf diepe pagina's is een zwak signaal.

Hoe los je het op: één oplossing per oorzaak

Twee gewoonten zorgen dat de oplossingen blijven werken. Ten eerste een regelmatige contentaudit: zwakke pagina's snoeien of samenvoegen verhoogt de gemiddelde kwaliteit van wat Google crawlt. Ten tweede houd je de XML-sitemap schoon, met alleen canonieke, indexeerbare URL's die je wilt laten ranken, en dien je hem opnieuw in bij Google na een grote opschoning.

Hoe lang duurt het voordat een pagina na een oplossing is geïndexeerd?

Er gebeurt niets tot Googlebot de pagina opnieuw crawlt, wat enkele dagen tot meerdere weken kan duren, afhankelijk van hoe vaak Google je site bezoekt. Zodra meerdere URL's zijn opgelost, kun je in het rapport op “Oplossing valideren” klikken; Google zegt dat validatie “meestal ongeveer twee weken duurt, maar in sommige gevallen veel langer kan duren”. Validatie is optioneel: het rapport werkt zichzelf bij naarmate de pagina's opnieuw worden gecrawld.

Bij een grote site is het controleren van URL's één voor één traag. De URL-inspectie-API staat volgens de gebruikslimieten van de Search Console API 2000 verzoeken per dag en 600 per minuut per site toe, genoeg om enkele honderden prioritaire pagina's in de tijd te volgen. Blijft een pagina na twee of drie nieuwe crawls in deze status, dan was de oplossing niet voldoende: kijk eerst opnieuw naar kwaliteit en intentie.

Waarom is dit belangrijk voor SEO en zichtbaarheid in AI-assistenten?

Een pagina buiten de index van Google brengt geen organische kliks, hoe goed ze ook is. Op een contentsite is een groot deel van de artikelen in deze status ook verspilde productie-inspanning, en het signaleert aan Google dat de site pagina's publiceert die hij niet nodig heeft, wat de indexering van nieuwe pagina's kan vertragen.

AI-assistenten vormen een tweede reden. ChatGPT, Perplexity en Gemini beantwoorden veel vragen door pagina's op te halen uit webzoekindexen en daarna hun bronnen te citeren. Een niet-geïndexeerde pagina wordt veel minder vaak opgehaald, en dus veel minder vaak geciteerd. Onze studie naar de platforms die AI het vaakst citeert laat zien welke bronnen ze bij antwoorden verkiezen.

Sorank is ons product: een SEO- en GEO-software op autopilot. Het GEO- en SEO-dashboard toont kliks, vertoningen en posities uit Search Console, zodat je ziet wanneer opgeloste pagina's vertoningen beginnen te krijgen, en de artikelgenerator schrijft artikelen met bronnen en interne links al op hun plek, de twee elementen die deze status het vaakst straft.

Kort samengevat: sorteer de URL's, negeer die niet moeten ranken, en los de oorzaak op de pagina's die ertoe doen op (inhoud, duplicaten, rendering, interne links) voordat je Google vraagt opnieuw te kijken. Om vanaf het begin pagina's te publiceren die worden geïndexeerd en geciteerd, zie de abonnementen van Sorank, vanaf $49 per maand, met een gratis proefperiode van 3 dagen.