Ringkasan
Pemeriksa indexability Google memberi tahu Anda apakah ada yang menghalangi Google mengindeks sebuah halaman. Alat ini mengikuti pengalihan, membaca status HTTP, memeriksa robots.txt untuk Googlebot, mencari noindex di meta tag dan header X-Robots-Tag, serta menganalisis tag canonical hingga halaman yang ditunjuknya. Anda mendapat salah satu dari tiga penilaian: dapat diindeks, Google kemungkinan akan mengindeks halaman lain, atau tidak dapat diindeks, lengkap dengan sinyal persis yang perlu diperbaiki dan saran tag canonical.
Ingin tahu lebih banyak? Tanyakan kepada
Sebuah pemeriksa indexability menjawab pertanyaan yang harus diajukan sebelum pekerjaan SEO lainnya: apakah halaman ini bisa muncul di Google sama sekali? Sebuah halaman bisa ditulis dengan baik, cepat, dan memiliki tautan, namun tetap tak terlihat karena satu baris di template. Google menegaskan bahwa halaman dengan aturan noindex dihapus dari hasil pencarian, dan aturan itu hanya berfungsi jika halaman tidak diblokir oleh robots.txt, karena crawler yang tidak dapat membaca halaman tidak pernah melihat noindex-nya (Google Search Central, memblokir pengindeksan dengan noindex). Pemeriksa ini membaca sinyal-sinyal tersebut secara bersamaan, seperti yang dilakukan Google.
Apa yang diuji oleh pemeriksa indexability?
Tempelkan URL lengkap sebuah halaman dan jalankan analisis. Pemeriksa meminta halaman seperti browser, lalu meninjau lima kelompok sinyal.
| Sinyal | Yang dibaca pemeriksa | Memblokir ketika |
|---|---|---|
| Pengalihan | Setiap lompatan hingga alamat akhir | Tidak pernah dengan sendirinya; Google mengindeks URL akhir |
| Status HTTP | Kode halaman akhir | Selain kode sukses 2xx |
| robots.txt | Aturan untuk Googlebot pada path akhir | Sebuah Disallow cocok dengan halaman, atau robots.txt menjawab error server 5xx |
| Direktif robots | Meta robots, meta googlebot, dan header X-Robots-Tag | noindex (atau none) ada |
| Canonical | rel="canonical" di HTML atau header HTTP Link, lalu halaman targetnya | Beberapa canonical yang berbeda, satu yang tidak terbaca, atau target yang dialihkan, gagal, atau noindex |
Pemeriksa juga menandai nofollow pada seluruh halaman, file yang bukan HTML, dan canonical yang relatif, di luar <head>, pada protokol lain, atau pada domain lain.
Bagaimana membaca tiga penilaian tersebut?
| Penilaian | Artinya | Yang perlu dilakukan |
|---|---|---|
| Halaman ini dapat diindeks oleh Google | Halaman menjawab 200, robots.txt mengizinkan Googlebot masuk, tidak ada noindex, dan canonical menunjuk ke dirinya sendiri | Tidak ada yang menghalangi. Jika masih tidak muncul di Google, lihat kualitas konten dan tautan internal |
| Google kemungkinan akan mengindeks halaman lain | Tidak ada yang melarang pengindeksan, tetapi canonical menunjuk URL lain, atau perlu diperbaiki | Biarkan jika halaman ini adalah duplikat; jika tidak, arahkan canonical ke halaman itu sendiri |
| Halaman ini tidak dapat diindeks | Setidaknya satu sinyal pemblokir: status error, blokir robots.txt, atau noindex | Perbaiki item merah lebih dulu, lalu jalankan pengecekan lagi |
Setiap temuan disertai penjelasan singkat, dan alat ini mengusulkan tag canonical untuk disalin ke <head> halaman. Pengecekan ini gratis, dengan 3 analisis per hari.
Mengapa sebuah halaman tidak diindeks oleh Google?
Lima penyebab di bawah ini menjelaskan sebagian besar kasus yang ditemukan pemeriksa. Masing-masing berasal dari dokumentasi Google sendiri.
- Status error. Google tidak mengindeks URL yang mengembalikan kode 4xx, dan URL yang sudah terindeks yang mulai mengembalikannya akan dihapus seiring waktu (Google, bagaimana kode status HTTP memengaruhi crawler).
- Noindex sisa dari situs staging. Sangat umum setelah peluncuran atau desain ulang: template masih membawa noindex.
- Aturan robots.txt. Google menekankan bahwa robots.txt "bukan mekanisme untuk menjauhkan halaman web dari Google": URL yang diblokir masih dapat dicantumkan, tanpa kontennya (Google, pengantar robots.txt). Untuk menjauhkan halaman, gunakan noindex; untuk memasukkannya, hapus blokirnya.
- robots.txt yang menjawab error server. Ketika Google menemukan robots.txt tetapi tidak dapat mengambilnya karena error 5xx, Google berhenti mengcrawl situs selama 12 jam pertama sambil terus mencoba lagi (Google, bagaimana Google menafsirkan robots.txt).
- Canonical yang menunjuk ke tempat lain. Google menganggap URL lain sebagai versi utama dan biasanya mengindeksnya.
Bagaimana tag canonical sebaiknya diatur?
Pada halaman asli, canonical menunjuk ke halaman itu sendiri, dengan URL absolut lengkap, di dalam <head>. Google merekomendasikan path absolut, dengan mencatat bahwa path relatif didukung tetapi "dapat menimbulkan masalah dalam jangka panjang", dan memperingatkan agar tidak mendeklarasikan canonical yang berbeda dengan metode yang berbeda (Google, cara menetapkan canonical).
| Situasi | Canonical yang tepat |
|---|---|
| Halaman asli | URL-nya sendiri, dengan https:// dan host yang benar |
| Halaman yang sama dengan parameter pelacakan atau pengurutan (?utm_source=..., ?sort=price) | URL bersih tanpa parameter; pemeriksa menandai kasus ini sebagai benar |
| Duplikat dari halaman lain | URL halaman aslinya |
| Konten yang disindikasikan dari situs lain | Halaman asli di domain lain |
| Halaman yang ingin Anda keluarkan dari Google | Tanpa canonical ke halaman lain: gunakan noindex saja |
Mencampur noindex dengan canonical ke halaman lain mengirim sinyal yang bertentangan, yang ditandai oleh pemeriksa. Untuk menguji canonical halaman lain dengan cepat, gunakan pemeriksa canonical, dan baca entri glosarium tentang tag canonical.
Bagaimana pengalihan memengaruhi pengindeksan?
Google mengindeks alamat akhir sebuah rantai pengalihan, bukan yang pertama. Crawler-nya mengikuti hingga 10 lompatan pengalihan secara bawaan, dan konten URL yang mengalihkan diabaikan. Pemeriksa ini mengikuti hingga 8 lompatan dan menampilkan setiap langkah, sehingga Anda bisa melihat di mana rantai perlu dipersingkat.
- Tautkan ke URL akhir di menu, sitemap, dan tautan internal Anda, agar pengunjung maupun crawler tidak melewati pengalihan.
- Hindari rantai: http ke https ke www ke garis miring di akhir adalah tiga lompatan padahal satu sudah cukup.
- Uji URL lama setelah migrasi dengan pemeriksa pengalihan.
Apakah halaman yang dapat diindeks selalu diindeks?
Tidak. "Dapat diindeks" berarti tidak ada yang melarang pengindeksan; Google tetap memutuskan apa yang ditambahkannya ke indeks, berdasarkan kualitas, duplikasi, dan seberapa mudah halaman itu ditemukan. Jika pemeriksa menyatakan halaman dapat diindeks tetapi tidak ada di Google:
- Inspeksi URL di Search Console: alat Inspeksi URL menunjukkan apakah Google mengenal halaman itu dan mengapa dikecualikan.
- Periksa tautan internal: halaman yang tidak ditautkan oleh halaman lain sulit ditemukan.
- Tambahkan ke sitemap Anda dan validasi file tersebut dengan pemeriksa sitemap.
- Tingkatkan kontennya jika mengulang apa yang sudah dikatakan halaman lain, di situs Anda atau di tempat lain.
Pengindeksan penting juga di luar hasil klasik. Google menyatakan bahwa sebuah halaman harus terindeks dan memenuhi syarat tampil dengan snippet agar muncul sebagai tautan pendukung di AI Overviews atau AI Mode (Google, fitur AI dan situs web Anda). Untuk AI lainnya, periksa aksesnya dengan audit crawlability AI.
Apa saja batasan pemeriksa ini?
- Satu URL setiap kali: alat ini tidak mengcrawl situs. Gunakan pada halaman yang penting dan pada template.
- Hanya aturan Googlebot: robots.txt dibaca untuk Googlebot; aturan untuk crawler lain tidak dievaluasi di sini.
- Tanpa rendering JavaScript: noindex atau canonical yang ditambahkan JavaScript setelah pemuatan tidak terlihat. Google merender halaman, jadi periksa kasus tersebut di Search Console.
- Sebuah potret sesaat: firewall, pemblokiran geografis, atau pembatasan laju dapat menjawab pemeriksa secara berbeda dari Googlebot.
Dari halaman yang dapat diindeks ke halaman yang terlihat
Indexability adalah pintunya: jika tertutup, tidak ada hal lain dalam SEO yang berarti. Setelah pintu terbuka, tugasnya adalah pantas mendapat tempat di hasil pencarian. Generator artikel blog Sorank menerbitkan halaman yang dapat diindeks dan terhubung dengan baik setiap hari, dasbor GEO / SEO menunjukkan mana yang mendapat impresi dan klik, dan SEO Chat menjawab pertanyaan pengindeksan Anda dengan data situs Anda sendiri. Lihat paket Sorank untuk menjalankannya secara autopilot.
