10 tips SEO efektif untuk membuat Website Anda diindeks oleh Google
Diterbitkan: 2021-01-29Situs web yang tidak terindeks seolah-olah tidak ada karena tidak akan muncul dalam permintaan pencarian dan tidak akan mendapatkan lalu lintas organik. Itu sebabnya kami tidak dapat mengizinkan Google untuk tidak mengindeks Situs Web kami. Sayangnya, ini adalah masalah yang cukup umum.
Jangan panik! Dalam posting ini, kami akan menjelaskan teknik utama untuk membuat Website Anda diindeks oleh Google.
Bagaimana cara kerja pengindeksan Google?
Google didasarkan pada algoritme yang agak rumit, tetapi proses yang diikutinya untuk mengindeks halaman itu sederhana. Mesin pencari bergantung pada serangkaian kode yang kita kenal sebagai web spider, crawler, atau bot .
Laba-laba ini memeriksa halaman web untuk menemukan konten baru dan yang diperbarui. Ini bisa berupa halaman baru di situs yang sudah ada atau Situs Web yang sama sekali baru. Bot mulai dengan merayapi beberapa halaman web dan kemudian mengikuti tautan halaman tersebut untuk menemukan URL baru .
Beberapa waktu yang lalu, SERP Google mudah untuk 'dimanipulasi', dan kami dapat membuat Google mengindeks Situs Web pada dasarnya dengan kata kunci dan tautannya.
Hari ini situasinya sama sekali berbeda. Meskipun kata kunci tersebut masih penting, Google juga memberikan bobot yang besar pada pengalaman dan niat pengguna di balik pencarian. Kita dapat mengatakan bahwa Laba-laba sekarang lebih pintar.
Pengindeksan Google mengacu pada bagaimana laba-laba memproses data yang ditemukan di halaman saat mereka merayapinya.
Cara cepat agar Situs Web Anda diindeks oleh Google
Seperti yang kami katakan, cukup umum bagi Google untuk tidak mengindeks halaman, tetapi penyebabnya biasanya sama.
Anda dapat menyelesaikannya dengan menerapkan solusi berikut:
Verifikasi bahwa Anda memiliki arahan robots.txt yang tepat
Alasan mengapa Google mungkin tidak mengindeks situs Anda mungkin karena arahan yang diberikan dalam file robots.txt.
Untuk memeriksanya, buka yourdomain.com/robots.txt, dan cari salah satu dari dua kode berikut:
User-agent: Googlebot Disallow: /
User-agent: * Disallow: /
Keduanya menunjukkan kepada GoogleBot bahwa itu tidak boleh merayapi halaman situs mana pun. Anda harus menghapusnya untuk menyelesaikan masalah tanpa basa-basi lagi.
Hapus Tag noindex
Google tidak akan mengindeks halaman Anda jika Anda melarangnya . Ini bisa berguna untuk menjaga privasi halaman web tertentu.
Ada dua cara untuk memberi tahu mesin pencari agar tidak mengindeks situs:
Tag meta
Google tidak mengindeks halaman dengan salah satu tag meta berikut di <head> HTML:
<meta name=“robots” content=“noindex”>
<meta name=“googlebot” content=“noindex”>
Anda perlu menghapus tag "noindex" yang terletak di halaman yang Anda ingin Google untuk mengindeks. Untuk melakukannya, Anda dapat menggunakan Crawler SEO seperti FandangoSEO untuk mengidentifikasi semua halaman dengan tag noindex dengan cepat.
X-Robots-Tag
GoogleBot juga menghormati arahan X-Robots Tag . Anda dapat memeriksa apakah Google tidak dapat merayapi halaman karena arahan ini menggunakan alat Inspeksi URL dari Google Search Console.
Anda harus meminta pengembang Anda untuk mengecualikan halaman yang ingin Anda indeks sehingga mereka tidak mengembalikan header ini.
Gunakan API Pengindeksan atau GSC Google
Situs dengan banyak halaman dengan sedikit konten (iklan, tawaran pekerjaan, dll.) dapat menggunakan API Pengindeksan Google untuk secara otomatis meminta konten baru dan perubahan konten untuk dirayapi dan diindeks.

API memungkinkan URL individual untuk dikirimkan. Ini bermanfaat agar Google terus memperbarui indeks halaman Anda. Berkat API ini Anda akan dapat:
- Perbarui URL : Beri tahu Google tentang URL baru atau yang diperbarui untuk dirayapi.
- Hapus URL: Beri tahu mesin telusur bahwa halaman yang kedaluwarsa telah dihapus dari situs.
- Periksa status permintaan : Lihat kapan GoogleBot terakhir merayapi URL.
Ini adalah sesuatu yang juga dapat Anda lakukan dengan FandangoSEO. Alat ini memungkinkan Anda untuk meminta Google hingga 200 URL untuk diindeks sekaligus.
Cara lain untuk mempercepat pengindeksan halaman web Anda adalah melalui Google Search Console. Gunakan alat pemeriksaan URL GSC untuk meminta Google merayapi ulang laman Anda. Ini berguna untuk meminta perayapan URL individual. Ini memungkinkan maksimum pengiriman 12 URL per hari jadi jika Anda perlu mengirimkan lebih banyak, lebih baik menggunakan peta situs XML.
Untuk memulai, Anda perlu memeriksa URL melalui Alat Inspeksi URL. Kemudian pilih Minta Pengindeksan . Alat ini pertama-tama akan memeriksa apakah Anda memiliki masalah pengindeksan. Jika tidak demikian, URL akan diantrekan untuk dirayapi.
Hilangkan tag kanonik yang salah
Tag kanonik memberi tahu Google versi halaman mana yang lebih disukai. Sebagian besar halaman tidak memuatnya, jadi mesin pencari berasumsi bahwa mereka harus mengindeksnya. Namun, jika halaman Anda memiliki tag kanonik yang salah, hal itu dapat menyebabkan kesalahan dengan memberi tahu Google tentang versi pilihan yang tidak ada.
Jika Anda ingin meninjau tag kanonik di situs web, gunakan Alat Inspeksi URL Google atau Perayap SEO. Jika Anda mendeteksi halaman apa pun yang tidak boleh berisi tag kanonik, hapus tag darinya.
Sertakan halaman yang relevan di peta situs Anda
Peta situs Anda memberi tahu Google halaman mana yang penting dan mana yang tidak. Oleh karena itu pentingnya menyediakan peta situs ke Google.
Yang benar adalah bahwa mesin pencari harus dapat menemukan halaman di Situs Web Anda terlepas dari apakah halaman tersebut ada di peta situs atau tidak, tetapi merupakan ide yang baik untuk memasukkannya karena 'membuat segalanya lebih mudah' bagi Google.
Anda dapat menggunakan alat Inspeksi URL dari GSC untuk memeriksa apakah halaman disertakan dalam peta situs.
Deteksi halaman yatim piatu
Halaman yatim piatu adalah halaman tanpa tautan internal. Google menemukan konten baru ketika merayapi web, tetapi secara logis tidak dapat menemukan halaman yatim piatu jika tidak ada tautan ke sana. Dan pengunjung situs juga tidak.
Anda dapat mendeteksi jika ada halaman yatim piatu di situs web dengan menggunakan Crawler SEO. Pelajari lebih lanjut di Panduan Halaman Yatim Piatu kami.
Perbaiki tautan internal yang mengandung atribut nofollow
Tautan nofollow adalah tautan yang berisi tag rel="nofollow" dan digunakan untuk mencegah transfer PageRank ke URL tujuan. Google tidak melacak jenis tautan ini hingga pembaruan Nofollow 1 Maret 2020, ketika mereka menyatakan bahwa atribut ini sekarang hanya berfungsi sebagai petunjuk .
Anda harus meninjau tautan internal Anda untuk mengidentifikasi tautan yang berisi atribut nofollow. Jika Anda ingin halaman target diindeks, Anda harus menghapus pedoman nofollow .
Tambahkan tautan internal yang kuat
Jika Anda ingin Google mengindeks halaman dengan cepat, Anda dapat menunjukkan betapa berharganya halaman ini dengan memberikan jumlah tautan (atau otoritas) yang baik untuk itu. Anda dapat melakukan ini dengan menautkan halaman sedekat mungkin dengan halaman beranda Anda. Jumlah inlink yang dimiliki halaman juga menunjukkan bobotnya di situs Anda.
Pelajari lebih lanjut tentang cara membuat tautan internal yang kuat di Panduan kami.
Hindari Duplikat konten
Bot Google bingung jika ada konten duplikat . Mesin pencari pada awalnya hanya mengindeks satu URL untuk setiap kumpulan konten yang unik, sehingga konten yang serupa menyulitkan mereka untuk memutuskan versi mana yang akan diindeks.
Karena halaman konten serupa "bersaing" satu sama lain, hal itu berdampak negatif pada kinerja semuanya. Itu sebabnya Anda harus menghindari duplikat konten.
Pastikan halaman Anda memiliki nilai
Sepertinya Google tidak akan mengindeks halaman berkualitas rendah, karena tidak memberikan nilai kepada pengguna. Oleh karena itu, jika tidak ada masalah teknis yang menjelaskan kegagalan pengindeksan, alasannya mungkin karena kurangnya nilai konten .
Tanyakan pada diri Anda sendiri apakah halaman tersebut berharga dan apakah layak untuk diklik. Jika tidak, maka kontennya perlu ditingkatkan. Selalu ingat niat pengguna.
Seperti yang Anda lihat, intinya adalah untuk memastikan bahwa tidak ada masalah teknis yang menghalangi pengindeksan halaman. Dan setelah ini dikesampingkan, Anda perlu melihat apakah itu memberikan nilai bagi pengguna.