Sammanfattning
Kontrollen av indexerbarhet i Google visar om något hindrar Google från att indexera en sida. Den följer omdirigeringarna, läser HTTP-statusen, kontrollerar robots.txt för Googlebot, letar efter noindex i metataggarna och i headern X-Robots-Tag, och analyserar canonical-taggen ända fram till sidan den pekar på. Du får ett av tre besked: indexerbar, Google indexerar sannolikt en annan sida, eller inte indexerbar, med den exakta signal som behöver åtgärdas och en föreslagen canonical-tagg.
Vill du veta mer? Fråga
En indexerbarhetskontroll besvarar frågan man bör ställa före allt annat SEO-arbete: kan den här sidan synas i Google alls? En sida kan vara välskriven, snabb och länkad och ändå vara osynlig på grund av en rad i en mall. Google är tydligt med att en sida med en noindex-regel tas bort från sökresultaten, och att regeln bara fungerar om sidan inte blockeras av robots.txt, eftersom en crawler som inte kan läsa sidan aldrig ser noindex (Google Search Central, blockera indexering med noindex). Kontrollen läser dessa signaler tillsammans, precis som Google gör.
Vad testar kontrollen av indexerbarhet?
Klistra in sidans fullständiga URL och kör analysen. Kontrollen begär sidan som en webbläsare gör och granskar sedan fem grupper av signaler.
| Signal | Vad kontrollen läser | Blockerar när |
|---|---|---|
| Omdirigeringar | Varje steg fram till slutadressen | Aldrig i sig; Google indexerar slutadressen |
| HTTP-status | Koden för den slutliga sidan | Allt annat än en framgångskod i 2xx |
| robots.txt | Reglerna för Googlebot på den slutliga sökvägen | En Disallow matchar sidan, eller robots.txt svarar med ett serverfel 5xx |
| Robots-direktiv | Meta robots, meta googlebot och headern X-Robots-Tag | noindex (eller none) finns |
| Canonical | rel="canonical" i HTML:en eller i HTTP-headern Link, sedan målsidan | Flera olika canonical-taggar, en som inte går att läsa, eller ett mål som omdirigerar, misslyckas eller har noindex |
Kontrollen flaggar också en nofollow på hela sidan, en fil som inte är HTML och en canonical som är relativ, ligger utanför <head>, använder ett annat protokoll eller pekar på en annan domän.
Hur läser du de tre beskeden?
| Besked | Vad det betyder | Vad du gör |
|---|---|---|
| Den här sidan kan indexeras av Google | Sidan svarar 200, robots.txt släpper in Googlebot, det finns ingen noindex och canonical pekar på sig själv | Inget blockerar den. Om den fortfarande saknas i Google, titta på innehållets kvalitet och de interna länkarna |
| Google indexerar sannolikt en annan sida | Ingenting förbjuder indexering, men canonical-taggen pekar på en annan URL eller behöver åtgärdas | Behåll den om sidan är en dubblett; annars pekar du canonical-taggen på sidan själv |
| Den här sidan kan inte indexeras | Minst en blockerande signal: felstatus, blockering i robots.txt eller noindex | Åtgärda de röda punkterna först och kör kontrollen igen |
Varje resultat kommer med en kort förklaring, och verktyget föreslår en canonical-tagg att kopiera in i sidans <head>. Kontrollen är gratis, med 3 analyser per dag.
Varför indexeras inte en sida av Google?
De fem orsakerna nedan förklarar de flesta fall som kontrollen hittar. Var och en kommer från Googles egen dokumentation.
- En felstatus. Google indexerar inte URL:er som svarar med en 4xx-kod, och redan indexerade URL:er som börjar svara med en sådan tas bort med tiden (Google, så påverkar HTTP-statuskoder crawlers).
- En noindex kvar från en teststagesida. Mycket vanligt efter en lansering eller en omdesign: mallen bär fortfarande noindex.
- En regel i robots.txt. Google understryker att robots.txt ”inte är en mekanism för att hålla en webbsida borta från Google”: en blockerad URL kan ändå listas, utan sitt innehåll (Google, introduktion till robots.txt). För att hålla en sida borta använder du noindex; för att få in den tar du bort blockeringen.
- En robots.txt som svarar med ett serverfel. När Google hittar robots.txt men inte kan hämta den på grund av ett 5xx-fel, slutar den att crawla webbplatsen de första 12 timmarna medan den fortsätter att försöka igen (Google, så tolkar Google robots.txt).
- En canonical som pekar någon annanstans. Google behandlar den andra URL:en som huvudversion och indexerar oftast den i stället.
Hur ska canonical-taggen sättas?
På en originalsida pekar canonical-taggen på sidan själv, med en fullständig absolut URL, inne i <head>. Google rekommenderar absoluta sökvägar och noterar att relativa sökvägar stöds men ”kan orsaka problem på lång sikt”, och varnar för att ange olika canonical-taggar med olika metoder (Google, så anger du en canonical).
| Situation | Rätt canonical |
|---|---|
| Originalsida | Sin egen URL, med https:// och rätt värd |
| Samma sida med spårnings- eller sorteringsparametrar (?utm_source=..., ?sort=price) | Den rena URL:en utan parametrar; kontrollen markerar det här fallet som korrekt |
| Dubblett av en annan sida | URL:en till originalet |
| Innehåll som syndikerats från en annan webbplats | Originalet på den andra domänen |
| Sida du vill ha bort från Google | Ingen canonical till en annan sida: använd bara noindex |
Att kombinera noindex med en canonical till en annan sida skickar motstridiga signaler, vilket kontrollen flaggar. För att snabbt testa canonical-taggen på andra sidor använder du verktyget för canonical-kontroll, och läser ordlistans text om canonical-taggen.
Hur påverkar omdirigeringar indexeringen?
Google indexerar slutadressen i en omdirigeringskedja, inte den första. Googles crawlers följer som standard upp till 10 omdirigeringssteg, och innehållet på de omdirigerande URL:erna ignoreras. Kontrollen följer upp till 8 steg och visar varje steg, så att du ser var en kedja bör förkortas.
- Länka till slut-URL:en i dina menyer, sitemaps och interna länkar, så att varken besökare eller crawlers går via omdirigeringen.
- Undvik kedjor: http till https till www till ett snedstreck på slutet är tre steg där ett hade räckt.
- Testa de gamla URL:erna efter en migrering med verktyget för omdirigeringskontroll.
Indexeras alltid en indexerbar sida?
Nej. ”Indexerbar” betyder att inget förbjuder indexering; Google avgör ändå vad som läggs till i dess index, utifrån kvalitet, dubblering och hur lätt sidan kan upptäckas. Om kontrollen säger att sidan kan indexeras men den saknas i Google:
- Inspektera URL:en i Search Console: verktyget för URL-inspektion visar om Google känner till sidan och varför den är utesluten.
- Kontrollera de interna länkarna: en sida som ingen annan sida länkar till är svår att upptäcka.
- Lägg till den i din sitemap och validera filen med verktyget för sitemap-kontroll.
- Förbättra innehållet om det upprepar vad andra sidor redan säger, på din webbplats eller någon annanstans.
Indexeringen spelar roll bortom de klassiska resultaten också. Google anger att en sida måste vara indexerad och berättigad att visas med ett utdrag för att synas som stödjande länk i AI-översikter eller AI-läget (Google, AI-funktioner och din webbplats). För de andra AI-tjänsterna kontrollerar du åtkomsten med granskningen av AI-crawlbarhet.
Vilka är kontrollens begränsningar?
- En URL i taget: den crawlar inte webbplatsen. Använd den på de sidor som betyder något och på mallar.
- Endast Googlebot-regler: robots.txt läses för Googlebot; regler för andra crawlers utvärderas inte här.
- Ingen JavaScript-rendering: en noindex eller canonical som läggs till av JavaScript efter laddning syns inte. Google renderar sidor, så kontrollera de fallen i Search Console.
- En ögonblicksbild: brandväggar, geoblockering eller hastighetsgränser kan ge ett annat svar i kontrollen än för Googlebot.
Från indexerbar sida till synlig sida
Indexerbarheten är dörren: är den stängd spelar inget annat inom SEO någon roll. När dörren är öppen gäller det att förtjäna en plats i resultaten. Sorank-generatorn för bloggartiklar publicerar varje dag indexerbara och väl länkade sidor, instrumentpanelen för GEO och SEO visar vilka av dem som får visningar och klick, och SEO-chatten besvarar dina frågor om indexering med din egen webbplats data. Se Sorank-planerna för att köra det på autopilot.
