Periksa Masalah Cakupan Indeks

Untuk memeriksa masalah cakupan indeks, Anda hanya perlu membuka properti Google Search Console dan menganalisis tab Cakupan, di bagian bawah Indeks.

Apa yang harus Anda cari?

Alat tersebut melaporkan masalah-masalah seperti:
● penurunan halaman yang diindeks tanpa sebab, yang dapat berarti Anda mungkin saja memblokir akses ke halaman tertentu, melalui robots.txt atau dengan melakukan noindex-ing
● lonjakan error
● halaman yang hilang
● kesalahan server
● eror 404

Dengan begitu banyak informasi, Anda kemudian dapat mengambil keputusan yang cerdas tentang situs SEO yang sehat.

Memahami laporan Cakupan Indeks pada Google Search Console

Laporan ini jauh lebih mudah dipahami, dan lebih berguna, jika Anda telah membaca cara kerja Penelusuran Google terlebih dahulu.

Laporan Cakupan Indeks menunjukkan status indeks Google dari semua URL di properti Anda.

  • Halaman ringkasan tingkat atas menampilkan hasil untuk semua URL di properti Anda yang dikelompokkan berdasarkan status (error, peringatan, atau valid) dan alasan spesifik untuk status tersebut (seperti URL yang dikirim tidak ditemukan (404) ).
  • Klik baris tabel di halaman ringkasan untuk melihat halaman detail yang berfokus pada semua URL dengan status / alasan yang sama.

Halaman ringkasan

Laporan tingkat atas menunjukkan status indeks semua halaman yang coba dirayapi Google di situs Anda, dikelompokkan berdasarkan status dan alasan.

Crawler utama

Nilai crawler utama di halaman ringkasan menunjukkan jenis pengguna default yang digunakan Google untuk merayapi situs Anda: Smartphone atau Desktop.  

Perayap ini masing-masing menyimulasikan pengunjung menggunakan perangkat seluler atau komputer desktop.Google merayapi semua laman di situs Anda menggunakan jenis perayap utama ini. Google juga dapat merayapi subkumpulan laman Anda menggunakan  perayap sekunder  (terkadang disebut perayap alternatif ), yang merupakan jenis agen pengguna lainnya. 

Misalnya, jika perayap utama untuk situs Anda adalah Ponsel cerdas, perayap sekunder adalah Desktop; jika crawler utama adalah Desktop, crawler sekunder Anda adalah Smartphone. Tujuan dari perayapan sekunder adalah mencoba mendapatkan lebih banyak informasi tentang bagaimana situs Anda berperilaku ketika dikunjungi oleh pengguna di jenis perangkat lain.

Apa yang dicari

Idealnya, Anda akan melihat jumlah halaman terindeks yang valid secara bertahap meningkat seiring pertumbuhan situs Anda. Jika Anda melihat penurunan atau lonjakan, lihat bagian pemecahan masalah. Tabel status di halaman ringkasan dikelompokkan dan diurutkan berdasarkan “status + alasan”.

Sasaran Anda adalah agar versi kanonik dari setiap halaman penting diindeks. Setiap halaman duplikat atau alternatif harus diberi label “Dikecualikan” dalam laporan ini. Halaman duplikat atau alternatif memiliki konten yang pada dasarnya sama dengan halaman kanonis. Memiliki halaman yang ditandai duplikat atau alternatif biasanya merupakan hal yang baik ; itu berarti kami telah menemukan halaman kanonis dan mengindeksnya. Anda dapat menemukan kanonis untuk URL apa pun dengan menjalankan fitur Inspeksi URL . Lihat lebih banyak alasan mengapa halaman mungkin hilang.

Apa yang tidak perlu dicari

  • Cakupan 100%: Anda seharusnya tidak mengharapkan semua URL di situs Anda diindeks, hanya halaman kanonisnya, seperti yang dijelaskan di atas.
  • Pengindeksan langsung: Saat Anda menambahkan konten baru, perlu waktu beberapa hari bagi Google untuk mengindeksnya. Anda dapat mengurangi keterlambatan pengindeksan dengan meminta pengindeksan dari Google.

Status

Setiap halaman dapat memiliki salah satu dari nilai status berikut:

  • Error: Halaman tidak diindeks. Pelajari lebih lanjut tentang kesalahan tersebut dan cara memperbaikinya. Anda harus berkonsentrasi pada masalah ini terlebih dahulu.
  • Peringatan: Halaman diindeks, berarti Anda memiliki masalah yang harus diwaspadai.
  • Dikecualikan: Halaman tidak diindeks, tetapi menurut kami itu adalah yang Anda inginkan. (Misalnya, Anda mungkin sengaja mengecualikannya dengan perintah noindex, atau mungkin duplikat dari halaman kanonis yang telah kami indeks di situs Anda.)
  • Valid: Halaman diindeks.

Alasan

Setiap status (kesalahan, peringatan valid, dikecualikan) memiliki alasan khusus untuk status itu. Lihat Deskripsi tipe status di bawah ini untuk deskripsi setiap tipe status, dan cara menanganinya.

Validasi

The Status validasi untuk masalah ini. Anda harus memprioritaskan perbaikan masalah yang berstatus validasi “gagal” atau “tidak dimulai”.

Filter dropdown penemuan URL

Anda dapat menggunakan filter tarik-turun di atas bagan untuk memfilter hasil indeks dengan cara Google menemukan URL. Nilai-nilai berikut tersedia:

  • Semua halaman yang diketahui [ Default ] – Menampilkan semua URL yang ditemukan oleh Google dengan cara apa pun.
  • Semua halaman yang dikirim – Hanya menampilkan halaman yang dikirim dalam peta situs ke laporan ini atau dengan ping peta situs .
  • URL peta situs tertentu – Hanya menampilkan URL yang tercantum dalam peta situs tertentu yang dikirim menggunakan laporan ini. Ini termasuk semua URL di peta situs bertingkat.

URL dianggap telah dikirim oleh peta situs meskipun URL tersebut juga ditemukan melalui beberapa mekanisme lain (misalnya, dengan melakukan crawling organik dari halaman lain).

Halaman detail

Klik satu baris di halaman ringkasan untuk membuka halaman detail untuk kombinasi status + alasan tersebut. Anda dapat melihat detail tentang masalah yang dipilih dengan mengklik Pelajari lebih lanjut di bagian atas halaman.

Grafik di halaman ini menunjukkan jumlah halaman yang terpengaruh dari waktu ke waktu.

Tabel menunjukkan contoh daftar halaman yang terpengaruh oleh status + alasan ini. Anda dapat mengklik elemen baris berikut:

  • Klik baris tersebut untuk melihat detail lebih lanjut tentang URL itu.
  •  membuka URL di tab baru.
  • membuka Inspeksi URL untuk URL itu.
  •  menyalin URL

Nilai Sumber di halaman detail menunjukkan jenis agen pengguna mana (Smartphone atau Desktop) yang digunakan untuk merayapi URL yang terdaftar.

Jika Anda telah memperbaiki semua kesalahan atau peringatan, klik  Validasi Perbaikan untuk memberi tahu Google bahwa Anda telah memperbaiki masalah tersebut.

Lihat URL yang ditandai dengan masalah yang sudah Anda perbaiki? Mungkin Anda telah memperbaiki masalah SETELAH perayapan Google terakhir. Oleh karena itu, jika Anda melihat URL dengan masalah yang telah Anda perbaiki, pastikan untuk memeriksa tanggal perayapan untuk URL tersebut. Periksa dan konfirmasi perbaikan URL Anda , lalu minta pengindeksan ulang.

Berbagi laporan

Anda dapat membagikan detail masalah dalam liputan atau laporan peningkatan dengan mengklik tombol Bagikan  di halaman. Tautan ini memberikan akses hanya ke halaman detail masalah saat ini, ditambah halaman riwayat validasi apa pun untuk masalah ini, kepada siapa pun yang memiliki link tersebut. Itu tidak memberikan akses ke halaman lain untuk sumber daya Anda, atau memungkinkan pengguna bersama untuk melakukan tindakan apa pun pada properti atau akun Anda. Anda dapat membatalkan tautan kapan saja dengan menonaktifkan berbagi untuk halaman ini.

Mengekspor data laporan

Banyak laporan menyediakan tombol ekspor untuk mengekspor data laporan. Data bagan dan tabel diekspor. Nilai yang ditampilkan sebagai ~ atau – di laporan (tidak tersedia / bukan angka) akan menjadi nol di data yang didownload.

Penyelesaian masalah

Anda dapat mengonfirmasi status pengindeksan untuk setiap URL yang ditampilkan dalam laporan ini dengan memeriksa URL sebagai berikut:

  1. Putuskan apakah status indeks benar-benar merupakan masalah berdasarkan jenis status , tujuan pengindeksan , dan kesalahan spesifik.
  2. Baca informasi khusus tentang masalah tersebut .
  3. Periksa URL dengan Alat Inspeksi URL:
    1. Klik ikon inspeksi di sebelah URL di tabel contoh untuk membuka Inspeksi URL untuk URL tersebut.
    2. Lihat detail perayapan dan indeks untuk URL tersebut di bagian  Cakupan> Perayapan  dan  Cakupan> Pengindeksan  pada laporan Inspeksi URL.
    3. Untuk menguji versi langsung halaman, klik  Uji URL langsung .

Jenis status berikut dipaparkan oleh laporan Cakupan Indeks:

Halaman dengan kesalahan belum diindeks

Error server (5xx): Server Anda menampilkan error 500 level saat halaman diminta.

Kesalahan pengalihan: Google mengalami kesalahan pengalihan dari salah satu jenis berikut: Rantai pengalihan yang terlalu panjang; loop pengalihan; URL pengalihan yang pada akhirnya melebihi panjang URL maks; ada URL yang buruk atau kosong di rantai pengalihan. Gunakan alat debugging web, seperti Lighthouse , untuk mendapatkan detail selengkapnya tentang pengalihan.

URL yang dikirimkan diblokir oleh robots.txt: Anda mengirimkan halaman ini untuk diindeks , tetapi halaman tersebut diblokir oleh file robots.txt situs Anda .

  1. Klik halaman di tabel Contoh untuk memperluas panel samping alat.
  2. Klik Uji pemblokiran robots.txt untuk menjalankan penguji robots.txt untuk URL tersebut. Alat tersebut harus menyoroti aturan yang memblokir URL itu.
  3. Perbarui file robots.txt Anda untuk menghapus atau mengubah aturan yang sesuai. Anda dapat menemukan lokasi file ini dengan mengklik Lihat robots.txt langsung di alat uji robots.txt. Jika Anda menggunakan layanan hosting web dan tidak memiliki izin untuk mengubah file ini, telusuri dokumentasi layanan Anda atau hubungi pusat bantuan mereka untuk memberi tahu mereka tentang masalah tersebut.

URL yang dikirimkan bertanda ‘noindex’: Anda mengirimkan halaman ini untuk diindeks , tetapi halaman tersebut memiliki perintah ‘noindex’ baik di tag meta atau header HTTP. Jika Anda ingin halaman ini diindeks, Anda harus menghapus tag atau header HTTP. Gunakan alat Inspeksi URL untuk mengonfirmasi kesalahan:

  1. Klik ikon inspeksi di sebelah URL dalam tabel.
  2. Di bawah Cakupan> Pengindeksan> Pengindeksan diizinkan? laporan harus menunjukkan bahwa noindex mencegah pengindeksan.
  3. Konfirmasikan bahwa tag noindex masih ada di versi langsung:
    1. Mengklik Uji URL langsung
    2. Di bawah Ketersediaan> Pengindeksan> Pengindeksan diizinkan? lihat apakah perintah noindex masih terdeteksi. Jika noindex sudah tidak ada, Anda dapat mengklik Minta Pengindeksan untuk meminta Google mencoba mengindeks halaman lagi. Jika noindex masih ada, Anda harus menghapusnya agar halaman dapat diindeks.

URL yang dikirim tampaknya merupakan Soft 404: Anda mengirimkan halaman ini untuk diindeks , tetapi server mengembalikan apa yang tampaknya soft 404. Pelajari cara memperbaikinya.

URL yang dikirimkan mengembalikan permintaan yang tidak sah (401): Anda mengirimkan halaman ini untuk diindeks , tetapi Google mendapat tanggapan 401 (tidak resmi). Hapus persyaratan otorisasi untuk halaman ini, atau izinkan Googlebot mengakses halaman Anda dengan memverifikasi identitasnya. Anda dapat memverifikasi kesalahan ini dengan mengunjungi halaman dalam mode penyamaran .

URL yang dikirimkan tidak ditemukan (404): Anda mengirimkan URL yang tidak ada untuk diindeks.

URL yang dikirim menghasilkan 403:  URL yang dikirimkan membutuhkan akses resmi, tetapi Google tidak memiliki kredensial apa pun. Jika halaman ini harus diindeks, berikan akses ke pengunjung anonim; jika tidak, jangan kirimkan halaman ini untuk diindeks.

URL  yang dikirimkan diblokir karena masalah 4xx lainnya: Server mengembalikan kode tanggapan 4xx yang tidak tercakup oleh jenis masalah lain yang dijelaskan di sini untuk URL yang dikirimkan. Anda harus memperbaiki kesalahan ini, atau tidak mengirimkan URL ini untuk pengindeksan. Coba debug halaman Anda menggunakan fitur Inspeksi URL.

Peringatan

Halaman dengan status peringatan mungkin memerlukan perhatian Anda, dan mungkin atau mungkin tidak diindeks, menurut hasil tertentu.

Diindeks meskipun diblokir oleh robots.txt: Halaman tersebut diindeks, meskipun diblokir oleh file robots.txt situs Anda. Google selalu menghormati robots.txt, tetapi ini tidak selalu mencegah pengindeksan  jika orang lain menautkan ke halaman Anda. Google tidak akan meminta dan meng-crawl halaman tersebut, tetapi kami masih dapat mengindeksnya, menggunakan informasi dari halaman yang tertaut ke halaman Anda yang diblokir. Karena aturan robots.txt, cuplikan apa pun yang ditampilkan di hasil Google Penelusuran untuk halaman tersebut mungkin akan sangat dibatasi.

Langkah selanjutnya:

  • Jika Anda benar- benar ingin memblokir halaman ini dari Google Penelusuran,  mekanisme robots.txt bukanlah yang tepat untuk menghindari pengindeksan  Agar tidak diindeks, hapus blok robots.txt dan gunakan ‘noindex’ .
  • Jika Anda tidak ingin memblokir halaman ini, perbarui file robots.txt Anda untuk membuka blokir halaman Anda . Anda dapat menggunakan penguji robots.txt untuk menentukan aturan mana yang memblokir halaman ini.

Halaman diindeks tanpa konten : Halaman ini muncul di indeks Google, tetapi karena alasan tertentu Google tidak dapat membaca konten. Kemungkinan alasannya adalah halaman mungkin terselubung ke Google atau halaman mungkin dalam format yang tidak dapat diindeks Google. Ini bukan  kasus pemblokiran robots.txt. Periksa halaman, dan lihat bagian  Cakupan  untuk detailnya.

Sah

Halaman dengan status valid telah diindeks.

Dikirim dan diindeks: Anda mengirimkan URL untuk diindeks, dan itu telah diindeks.

Diindeks, tidak dikirim di peta situs: URL ditemukan oleh Google dan diindeks. Sebaiknya kirimkan semua URL penting menggunakan peta situs .

Pengecualian

Halaman-halaman ini biasanya tidak diindeks, dan menurut kami itu tepat. Halaman ini merupakan duplikat dari halaman yang diindeks, atau diblokir dari pengindeksan oleh beberapa mekanisme di situs Anda, atau tidak diindeks karena alasan yang menurut kami bukan merupakan error.

Dikecualikan oleh tag ‘noindex’: Saat Google mencoba mengindeks halaman, ia menemukan perintah ‘noindex’  dan karena itu tidak mengindeksnya. Jika Anda tidak ingin halaman ini terindeks, selamat! Jika Anda tidak ingin halaman ini ke diindeks, Anda harus menghapus bahwa ‘noindex’ direktif. Untuk mengonfirmasi keberadaan tag atau perintah ini, minta halaman di browser dan telusuri isi respons  dan header respons untuk “noindex”. 

Diblokir oleh alat penghapusan halaman: Halaman saat ini diblokir oleh permintaan penghapusan URL . Jika Anda adalah pemilik situs terverifikasi, Anda dapat menggunakan alat penghapusan URL untuk melihat siapa yang mengirimkan permintaan penghapusan URL. Permintaan penghapusan hanya berlaku sekitar 90 hari setelah tanggal penghapusan. Setelah jangka waktu tersebut, Googlebot dapat kembali dan mengindeks halaman meskipun Anda tidak mengirimkan permintaan indeks lagi. 

Jika Anda tidak ingin halaman diindeks , gunakan ‘noindex’ , memerlukan otorisasi untuk halaman, atau hapus halaman.

Diblokir oleh robots.txt: Halaman ini diblokir untuk Googlebot dengan file robots.txt. Anda dapat memverifikasi ini menggunakan penguji robots.txt . Perhatikan bahwa ini tidak berarti bahwa halaman tidak akan diindeks dengan cara lain. Jika Google dapat menemukan informasi lain tentang halaman ini tanpa memuatnya, halaman tersebut masih dapat diindeks (meskipun ini kurang umum). Untuk memastikan bahwa halaman tidak diindeks oleh Google, hapus blok robots.txt dan gunakan perintah ‘noindex’ .

Diblokir karena permintaan tidak sah (401): Halaman diblokir untuk Googlebot oleh permintaan otorisasi (tanggapan 401). Jika Anda ingin Googlebot dapat meng-crawl halaman ini, hapus persyaratan otorisasi, atau izinkan Googlebot mengakses halaman Anda .

Halaman di-crawl saat ini tidak diindeks: Halaman telah di-crawl oleh Google, tetapi tidak diindeks. Ini mungkin atau mungkin tidak diindeks di masa mendatang; tidak perlu mengirim ulang URL ini untuk dirayapi.

Ditemukan saat ini tidak diindeks: Halaman ditemukan oleh Google, tetapi belum di-crawl. Biasanya, Google ingin merayapi URL tetapi hal ini diperkirakan akan membebani situs; oleh karena itu Google menjadwal ulang penjelajahan. Inilah mengapa tanggal perayapan terakhir kosong di laporan.

Halaman alternatif dengan tag kanonis yang tepat: Halaman ini adalah duplikat dari halaman yang dikenali Google sebagai kanonis . Halaman ini mengarah ke halaman kanonis dengan benar, jadi Anda tidak perlu melakukan apa pun.

Duplikat tanpa kanonis pilihan pengguna: Halaman ini memiliki duplikat, tidak ada satupun yang ditandai sebagai kanonis. Menurut kami halaman ini bukan halaman kanonis. Anda harus secara eksplisit menandai kanonis untuk halaman ini . Memeriksa URL ini  harus menunjukkan URL kanonis yang dipilih Google.

Duplikat, Google memilih kanonis yang berbeda dari pengguna:  Halaman ini ditandai sebagai kanonis untuk sekumpulan halaman, tetapi Google menganggap URL lain membuat kanonis yang lebih baik. Google telah mengindeks halaman yang kami anggap kanonik daripada yang ini. Sebaiknya Anda menandai halaman ini secara eksplisit sebagai duplikat dari URL kanonis . Halaman ini ditemukan tanpa permintaan crawl yang eksplisit. Memeriksa URL ini  harus menunjukkan URL kanonis yang dipilih Google.

Tidak ditemukan (404): Halaman ini mengembalikan kesalahan 404 saat diminta. Google menemukan URL ini tanpa permintaan eksplisit atau peta situs. Google mungkin telah menemukan URL sebagai link dari situs lain, atau mungkin halaman tersebut sudah ada sebelumnya dan telah dihapus. Googlebot mungkin akan terus mencoba URL ini selama beberapa waktu; tidak ada cara untuk memberi tahu Googlebot agar melupakan URL secara permanen, meskipun Googlebot semakin jarang merayapinya. 404 tanggapan bukanlah masalah, jika disengaja. Jika halaman Anda telah pindah, gunakan pengalihan 301 ke lokasi baru. Baca  Memperbaiki kesalahan 404

Halaman dengan pengalihan: URL adalah pengalihan, dan oleh karena itu tidak ditambahkan ke indeks.

Soft 404: Permintaan halaman mengembalikan apa yang kami anggap sebagai respons 404 ringan . Ini berarti bahwa ia mengembalikan pesan “tidak ditemukan” yang ramah pengguna tanpa kode tanggapan 404 yang sesuai. Sebaiknya kembalikan kode respons 404 untuk halaman yang benar-benar “tidak ditemukan”, atau tambahkan lebih banyak informasi ke halaman untuk memberi tahu kami bahwa ini bukan soft 404. 

URL duplikat yang dikirimkan tidak dipilih sebagai kanonis: URL tersebut adalah salah satu dari kumpulan URL duplikat tanpa halaman kanonis yang ditandai secara eksplisit . Anda secara eksplisit meminta URL ini untuk diindeks, tetapi karena ini adalah duplikat, dan Google menganggap bahwa URL lain adalah kandidat yang lebih baik untuk kanonis, Google tidak mengindeks URL ini. Sebagai gantinya, kami mengindeks kanonis yang kami pilih. (Google hanya mengindeks kanonis dalam sekumpulan duplikat.) Perbedaan antara status ini dan “Google memilih kanonis yang berbeda dari pengguna” adalah di sini Anda secara eksplisit meminta pengindeksan. Memeriksa URL ini  harus menunjukkan URL kanonis yang dipilih Google.

Diblokir karena akses dilarang (403):  Agen pengguna memberikan kredensial, tetapi tidak diberi akses. Namun, Googlebot tidak pernah memberikan kredensial, sehingga server Anda salah mengembalikan kesalahan ini. Kesalahan ini harus diperbaiki, atau halaman harus diblokir oleh robots.txt atau noindex.

Diblokir karena masalah 4xx lainnya: Server mengalami kesalahan 4xx yang tidak tercakup oleh jenis masalah lain yang dijelaskan di sini.

Masih butuh bantuan?

YA. Bantu Saya Pasangkan.

Tools yang digunakanPendalaman Materi
WordPress– Cukup jelas