Mulailah dengan statusnya, bukan diagnosisnya
Laporan pengindeksan Halaman mencakup masalah teknis asli dan pengecualian yang diharapkan. Aturan robots.txt, arahan noindex, persyaratan autentikasi, atau respons yang gagal dapat mencegah pengindeksan; status duplikat dan kanonik mungkin berfungsi sebagaimana mestinya; dan URL yang ditemukan mungkin belum dirayapi.
Status yang paling menyesatkan adalah “Dirayapi — saat ini tidak diindeks”. Ini mengonfirmasi bahwa Google mengambil halaman tersebut tetapi tidak menambahkannya ke indeks pada saat itu. Google secara eksplisit mengatakan bahwa halaman tersebut mungkin akan diindeks atau tidak nanti dan tidak perlu mengirimkannya kembali hanya karena status ini.
Status yang memang benar-benar galat
Status-status ini melukiskan sesuatu di pihak Anda yang menghalangi penyimpanan. Google melabeli sumber tiap status sebagai Situs bila Anda bisa memperbaikinya sendiri, dan Google bila sebabnya ada di pihak mereka. Membetulkan respons yang mendasarinya adalah keseluruhan perbaikannya.
| Status | Artinya | Sumber |
|---|---|---|
| Kesalahan server (5xx) | Server mengembalikan galat kelas 500 | |
| Kesalahan pengalihan | Rantai pengalihan berputar atau gagal | Situs |
| URL diblokir oleh robots.txt | robots.txt menahan izin pengambilan | Situs |
| URL ditandai ‘noindex’ | Halaman menyajikan arahan noindex | Situs |
| Soft 404 (404 semu) | Pesan tidak ditemukan dikembalikan dengan kode 200 | Situs |
| Diblokir karena permintaan tak sah (401) | Halaman menuntut kredensial | Situs |
| Tidak ditemukan (404) | URL mengembalikan 404 | Situs |
| Diblokir karena akses dilarang (403) | Server mengembalikan 403 | Situs |
| Diblokir karena masalah 4xx lain | Respons 4xx lainnya | Situs |
Dua di antaranya layak diperhatikan lebih karena begitu sering ditimbulkan sendiri. 404 semu berarti Anda mengembalikan halaman ramah «tidak ada apa-apa di sini» dengan status 200: mesin telusur melihat keberhasilan dan konten tipis alih-alih ketiadaan, jadi katakan yang sebenarnya dengan 404 atau 410. Dan 401 atau 403 pada halaman yang Anda niatkan publik biasanya berarti aturan staging atau firewall ikut terkirim ke produksi.
Status yang tampak galat padahal bukan
Inilah yang paling banyak menghasilkan kerja sia-sia. Setiap satunya adalah Google melaporkan keputusan yang ia ambil, bukan cacat yang Anda buat. Mengejarnya menghabiskan perhatian yang dibutuhkan masalah yang sungguhan.
| Status | Arti sebenarnya |
|---|---|
| Halaman alternatif dengan tag kanonis yang tepat | Penggabungan bekerja persis sebagaimana dimaksudkan |
| Duplikat tanpa kanonis pilihan pengguna | Anda tak menyatakan kanonis, jadi Google memilihkan |
| Duplikat, Google memilih kanonis berbeda | Anda menyatakan satu, Google tak sependapat |
| Halaman dengan pengalihan | URL nonkanonis yang mengalihkan, sesuai rancangan |
| Ditemukan – saat ini tidak diindeks | Diketahui tetapi belum diambil |
| Sudah dirayapi – saat ini tidak diindeks | Diambil, dinilai, lalu disisihkan |
Dua status duplikat itu layak dipisahkan. «Tanpa kanonis pilihan pengguna» berarti Anda tak pernah menyatakan kanonis dan Google memilih untuk Anda: hampir selalu tak berbahaya, tetapi Anda menyerahkan keputusan yang bisa Anda ambil sendiri. «Google memilih kanonis berbeda» berarti Anda menyatakan satu lalu dianulir, pertanda halaman yang Anda tunjuk bukan yang dianggap utama oleh mesin telusur.
Membaca «sudah dirayapi, tidak diindeks» dengan jujur
Status ini berarti Google merayapi laman tersebut tetapi tidak mengindeksnya pada saat itu. Hal ini tidak mengidentifikasi satu penyebab universal, dan pengujian Inspeksi URL langsung tidak dapat memprediksi keberhasilan pengindeksan dengan pasti. Tidak ada gunanya menciptakan kesalahan teknis yang tidak disebutkan dalam laporan.
Pada situs berbasis template, hal yang layak ditinjau mencakup kemiripan antarlaman, sinyal canonical, tautan internal, dan apakah setiap halaman menambahkan informasi yang tidak dimiliki halaman sejenis. Itu adalah pemeriksaan diagnostik, bukan klaim bahwa setiap URL dengan status ini gagal melewati ambang kualitas.
- Buka Alat Inspeksi URL dan pastikan halaman mengembalikan 200, berkanonis diri, dan merender konten utamanya.
- Bandingkan dengan tiga halaman saudara terdekatnya. Bila nilai yang disubstitusi bisa ditukar dan menghasilkan halaman setara, mesin telusur pun melihatnya.
- Periksa apakah ada yang menautinya secara internal dengan teks jangkar deskriptif, atau ia hanya hidup di peta situs.
- Tanyakan apa yang dijawab halaman ini yang tak dijawab saudara mana pun. Bila tak ada jawabannya, itulah temuannya.
- Ubah halaman agar jawaban itu ada, lalu minta pengindeksan — dengan urutan itu.
«Ditemukan, tidak diindeks» adalah sinyal lain
Yang ini berarti URL diketahui tetapi belum diambil. Di situs kecil biasanya keadaan sesaat. Dalam skala besar inilah gejala paling jelas yang Google sebut untuk kendala anggaran perayapan yang nyata: terlalu banyak URL, terlalu sedikit permintaan, dan antrean tak pernah sampai kepadanya.
Bila porsi besar URL Anda mengendap di sini, kerja yang produktif adalah mengurangi berapa banyak URL bernilai rendah yang Anda minta dipertimbangkan mesin telusur — menyatukan duplikat, mengembalikan 404 yang benar untuk yang sudah hilang, memangkas rantai pengalihan — bukan mengirim ulang halaman satu per satu.
Mengerjakan laporannya, bukan gejalanya
Laporan disusun menurut sebab, yang menggoda untuk dikerjakan dari atas berdasarkan volume. Tahan godaan itu. Seribu URL di bawah «Halaman dengan pengalihan» biasanya peta pengalihan yang berfungsi, sementara empat puluh di bawah «Soft 404» adalah cacat nyata yang menimpa halaman nyata.
- Perbaiki dulu semua yang ada di tabel galat — itu tak ambigu dan mekanis.
- Kesampingkan status informatif, kecuali volumenya bertentangan dengan niat Anda, seperti penggabungan kanonis yang tak pernah Anda rancang.
- Perlakukan «sudah dirayapi, tidak diindeks» sebagai tunggakan redaksional, bukan teknis.
- Validasi ulang hanya setelah respons atau kontennya benar-benar berubah.