Ekskludert av «noindex»-tagg: Er det normalt, og hvordan fikser du det?

Ekskludert av noindex-tagg er den indekseringsstatusen du selv har skapt, enten med vilje eller ved en feil. Googles dokumentasjon for rapporten for sideindeksering beskriver årsaken med tre setninger: «Da Google prøvde å indeksere siden, møtte den et «noindex»-direktiv og lot derfor være å indeksere den. Hvis du ikke vil at denne siden skal indekseres, gratulerer vi! Hvis du vil at den skal indekseres, bør du fjerne «noindex»-direktivet.» Denne guiden hjelper deg å avgjøre hvilken side av setningen hver URL havner på, å finne den nøyaktige kilden til en uønsket regel, og å fikse den uten å ødelegge noe annet.

Hva betyr «Ekskludert av noindex-tagg»?

En noindex-regel forteller søkemotorer at de ikke skal vise en side i resultatene. Google leser den på to steder, slik Googles veiledning om blokkering av indeksering med noindex forklarer:

• En robots-metatagg i <head> i HTML-en: <meta name="robots" content="noindex"> for alle søkemotorer, eller name="googlebot" for bare Google.
• En X-Robots-Tag HTTP-header som serveren sender sammen med svaret, med verdien noindex eller none. Dette er det eneste alternativet for filer uten HTML, for eksempel PDF-er.

Når Googlebot finner en av dem, holder den URL-en utenfor indeksen. Statusen vises i Google Search Console under Indeksering, deretter Sider, i tabellen «Hvorfor sider ikke er indeksert». Hjelpesiden viser den samme årsaken som «URL markert med noindex». Begge navnene beskriver én og samme situasjon.

Tre forhold endrer hvordan du leser rapporten:

• Google fulgte instruksen din. I motsetning til «Crawlet – foreløpig ikke indeksert», der Google selv bestemmer seg mot en side, viser denne statusen en instruks som nettstedet har sendt.
• Det krever en crawl. Google kan bare se en noindex-regel på en side den har lov til å hente. En side som robots.txt blokkerer, kommer aldri til denne statusen.
• Regelen kan komme fra hvor som helst i kjeden. HTML, CMS, plugin, tema, serverkonfigurasjon og CDN kan hver for seg legge til regelen, og sidekildekoden viser ikke HTTP-headere.

Er det normalt eller en feil?

De fleste nettsteder har URL-er i denne statusen, og mange av dem hører hjemme der. Googles rapport sier at sider som listes som ikke indeksert er der «ikke nødvendigvis på grunn av en feil». Sorter listen etter type URL før du fikser noe.

Siste linje er viktigere enn den ser ut til. Et sitemap sier til Google «indekser disse sidene», mens noindex sier det motsatte. Hold sitemapet begrenset til sider som kan indekseres og er kanoniske (vår guide om innsending av sitemap til Google viser hvordan du rydder det).

Hvor kommer en uønsket noindex fra?

Når en viktig side har noindex, er årsaken nesten alltid en av kildene nedenfor. Sjekk dem i denne rekkefølgen, fra den vanligste til den sjeldneste.

WordPress-tilfellet er vanlig nok til å nevne. Ifølge WordPress-dokumentasjonen for leseskjermen legger avkrysningen «Be søkemotorer om å ikke indeksere dette nettstedet» til noindex,nofollow i hodet på hver side (fra versjon 5.3). Én glemt avkrysning etter en lansering er nok til å fjerne et helt nettsted fra Google. Lanseringer og redesign er de mest risikable øyeblikkene, og derfor har en sjekkliste for SEO-flytting alltid en kontroll av robots-reglene. For WordPress-spesifikke innstillinger, se siden vår om SEO og GEO for WordPress.

Hvordan finner du ut av statusen, steg for steg?

1. Åpne rapporten. I Search Console går du til Indeksering, deretter Sider, klikker på «Ekskludert av noindex-tagg» og eksporterer listen.
2. Sorter URL-ene etter tabellen over. Legg til side de som skal holdes utenfor indeksen.
3. Inspiser én viktig URL. Lim den inn i URL-inspeksjon. Linjen «Indeksering tillatt?» forteller deg om Google så noindex, og om den kom fra robots-metataggen eller X-Robots-Tag-headeren.
4. Test den direkte URL-en. Klikk på «Test direkte URL». Hvis den direkte versjonen ikke lenger har noindex, er regelen allerede fjernet, og Google trenger bare en ny crawl.
5. Sjekk begge stedene selv. Se etter noindex i sidekilden, og deretter i svarheaderne (nettleserens utviklerverktøy, fanen Nettverk). En gratis HTTP-headersjekker viser X-Robots-Tag uten at du må åpne utviklerverktøy, og indekserbarhetssjekkeren tester metataggen, headeren og robots.txt i én omgang.
6. Finn kilden med tabellen over, og start med CMS-innstillingen og SEO-pluginen.

Hvordan fikser du det?

Hvordan du fikser det avhenger av kilden. Endre innstillingen der regelen blir laget, aldri bare det synlige resultatet, ellers kommer den tilbake ved neste oppdatering.

Etter fiksen ber du om indeksering av de viktigste URL-ene i URL-inspeksjon, og sender sitemapet inn på nytt hvis mange sider ble berørt. For en gruppe fikset URL-er klikker du på «Valider fiks» i rapporten. Google sier at validering «vanligvis tar opptil cirka to uker, men i noen tilfeller kan ta mye lengre tid». Tøm eventuell sidebuffer eller CDN-buffer først, ellers kan Google hente den gamle versjonen med den gamle regelen. Hvis sider fortsatt ikke vises flere uker senere, lister guiden vår om å få sider indeksert av Google de neste tiltakene. Og hvis de flytter over til Crawlet – foreløpig ikke indeksert, er problemet nå innholdet, ikke regelen.

Noindex, robots.txt eller kanonisk tagg: hvilken skal du bruke?

De tre verktøyene blandes ofte sammen, og feil kombinasjon skaper de mest forvirrende rapportene.

Google sier det tydelig: hvis robots.txt blokkerer en side, «vil crawleren aldri se noindex-regelen». Vil du at en side skal ut av indeksen, la den være crawlbar med noindex til den forsvinner, og bestem deretter om du vil blokkere den. Test filen med robots.txt-sjekkeren, og les spesifikasjonen for robots-metataggen for hele listen med regler. Den sier også at når reglene er i konflikt, gjelder «den strengeste regelen».

Hvorfor betyr det noe for SEO og for synlighet i KI?

En side under noindex får ingen organiske klikk fra Google, uansett kvalitet. På et stort nettsted kan én uønsket regel i en mal fjerne hundrevis av produkt- eller artikkelsider på én gang, og det første tegnet er ofte et trafikkfall uker senere. Hvis nettstedet ditt ser ut til å ha forsvunnet helt, start med sjekklisten vår om at et nettsted ikke vises på Google.

KI-assistenter gir en andre kostnad. ChatGPT, Perplexity og Gemini svarer ofte ved å hente sider fra søkeindekser på nettet og sitere dem, så en side som mangler i indeksen har liten sjanse til å bli sitert. Vår studie av plattformene KI-ene siterer oftest viser hvilke kilder de foretrekker.

Sorank er vårt produkt: en autopilot-programvare for SEO og GEO. Dashbordet for GEO og SEO viser klikk, visninger og posisjoner fra Search Console, så et plutselig fall i visninger på en gruppe sider blir raskt synlig. Og den gratis Sorank-utvidelsen for Chrome flagger SEO-problemer på alle sider du åpner.

Kort versjon: behold noindex på sider som aldri bør rangere, fjern den ved kilden på sider som bør det, hold sitemapet fritt for noindex-URL-er, og blokker aldri en side i robots.txt mens du venter på at Google skal lese dens noindex. For å publisere sider laget for å bli indeksert og sitert, se Sorank-abonnementene, fra $49 per måned med 3 dagers gratis prøveperiode.