Cara memperbaiki website yang sulit terindex google

Selamat Datang di Blog  Orang IT,

Jika situs anda tidak terindex oleh mesin pencari google maka anda tidak akan memperoleh keuntungan apapun , website anda tidak muncul dengan permintaan kata kunci tertentu , website tidak mendapatkan lalu lintas organik dan sebagainya

Ketika anda memutuskan untuk membaca artikel ini berarti anda sudah mengetahui dampak website yang tidak terindeks mesin pencari google dan itu membuat situs anda semakin terpuruk

Pengertian crawling dan indeks 

Google akan merayapi seluruh halaman web menggunakan metode yang disebut crawling dari satu halaman ke halaman lainnya atau melalui tautan link kemudian url yang mereka rayapi akan ditambahkan kedalam database google sehingga terindeks dalam search engine.

Saat pengguna google mengetikkan suatu kata kunci pada dasarnya mereka sedang mencari sebuah data yang tersimpan dalam database google

Jadi apabila situs atau halaman anda belum ditambahkan kedalam database google, mana mungkin itu akan muncul dihasil pencarian

Sederhananya :

Perayapan / crawling : Proses googlebot merayap dari satu halaman kehalaman lain melalui tautan link aktif

Pengindeksan / indexing : Proses menyimpan data dari hasil perayapan googlebot kedalam sebuah database yang sangat besar

Botspider : Sebutan lain untuk robot google yang berperan mengumpulkan data-data dari sebuah halaman web dan mereka melakukannya dengan skala besar (hampir 4 milyar halaman dirayapi setiap 24 jam)

Daftar 10 konten yang muncul dihalaman teratas google merupakan hasil terbaik dan dianggap paling relevan setelah melalui serangkaian filter algoritma . Ada jutaan halaman yang siap bersaing oleh sebab itu google hanya menampilkan hasil terbaik dari yang terbaik untuk penggunanya

Yang harus anda pahami sampai disini adalah index dan peringkat adalah dua hal yang berbeda, semua orang bisa membuat situs mereka terindex namun tidak semuanya bisa mengatakan dengan yakin bahwa halaman mereka pasti muncul dihasil pencarian teratas

Index untuk muncul dihasil pencarian , sementara peringkat untuk mengalahkan pesaing

Website anda tidak akan mendapatkan visitor kalau muncul dihalaman 3 kebawah bahkan bisa dikatakan itu hampir mustahil

Cara memeriksa apakah situs anda sudah di indeks oleh google

Buka google lalu ketikkan operator site:helmykediri.com (ganti nama blog saya dengan milik anda)

Angka ini menunjukkan berapa jumlah halaman dari situs anda yang sudah di indeks oleh search engine google. Jika anda ingin memeriksa url halaman tertentu gunakan operator yang sama site:namadomain.com/blablabla.html

Jika halaman tersebut belum terindeks maka tidak akan ada hasil yang ditampilkan

Perlu di ingat, apabila anda sudah mendaftarkan situs ke google search console lebih dari 3 bulan maka anda bisa melihat laporan cakupan indeks yang lebih akurat mengenai status index situs web 

Buka GSC > Indeks > Cakupan

Kolom valid menunjukkan jumlah halaman yang sudah berhasil terindeks dengan sempurna , sementara kolom “valid with warning” itu biasanya halaman yang bisa diakses namun dikecualikan dari indeks (arsip , label , search , feed …) sementara error menunjukkan halaman yang gagal dirayapi oleh googlebot

Jika pada kolom error dan valid with warning menunjukkan angka 0 berarti tidak ada masalah sama sekali pada situs anda terkait index tetapi apabila memiliki jumlah angka yang besar, anda harus melakukan pendekatan untuk melihat alasan mengapa halaman tersebut tidak dicrawl dengan sempurna

Anda juga bisa menggunakan fitur inspeksi url untuk melihat apakah halaman tertentu sudah terindeks oleh google atau belum , jika belum anda bisa mengajukan permintaan dengan menambahkan tautan url tersebut kedaftar antrian khusus yang diprioritaskan

Apabila anda melihat status centang hijau dengan keterangan “URL ada digoogle” itu baik-baik saja , tetapi jika statusnya “url is not on google” anda bisa menekan perintah request indexing

Cara agar situs di indeks oleh google secara manual 

Mengindekskan artikel ke google memang bisa dilakukan melalui halaman search console pada fitur inspeksi url , tetapi apabila halaman anda memang error maka itu akan seperti index – deindex – reindex begitu seterusnya karena memang googlebot mengalami kesulitan saat merayapi halaman tersebut

Berikut adalah tips sederhana bagaimana membuat situs anda dirayapi oleh google dengan cepat :

1. Hapus blok perayapan di robot.txt

Apakah situs anda sulit terindex google ? itu mungkin karena blok perayapan dari file robots.txt yang anda gunakan.

Untuk mengeceknya gunakan url berikut helmykediri.com/robots.txt ( ganti url saya dengan url anda )

Ini adalah contoh robot txt yang salah :

User-agent: Googlebot
Disallow: /
User-agent: *
Disallow: /
Sitemap: https://www.helmykediri.com/sitemap.xml

Apakah anda melihat sesuatu yang aneh disini ? itu adalah 2 blok kode berikut

User-agent: Googlebot
Disallow: /

User-agent: *
Disallow: /

Kedua kode diatas tidak mengijinkan googlebot untuk merayapi url setelah tanda “/” dibelakang root domain. Untuk memperbaikinya silahkan dihapus

Beberapa webmaster sering tidak menguasai bagaimana robots.txt bekerja atau mungkin jatuh kedalam kesalahan tanpa mereka sadari. Untuk memahami lebih lanjut silahkan buka google search console lalu pada menu cakupan lihat pada kolom “blok” atau di “indeks tetapi dikecualikan” anda akan melihat format url seperti apa yang dicekal

Itu menunjukkan bahwa seluruh halaman dengan format /search tidak di indeks sesuai aturan robots.txt, jika memang anda ingin google mengindeks halaman label silahkan hilangkan tanda disallow: / pada file robots.txt disitus anda

Jika anda ingin men-deindex halaman khusus silahkan dirubah menjadi disallow: /jangan-index-halaman-ini.html

Cukup sederhanakan?

Selengkapnya : Belajar robots.txt untuk pemula

2. Hapus meta tag noindex

Jika anda menjumpai salah satu meta tag dibawah ini didalam template atau tepatnya dibawah tag <head> pertimbangkan untuk menghapus mereka

<meta name=“robots” content=“noindex”>

<meta name=“googlebot” content=“noindex”>

Ini adalah cara lain mengatur perilaku googlebot apakah di ijinkan untuk mengindeks halaman tersebut atau tidak , bagian pentingnya terletak pada status noindex yang artinya menolak index

3. Sertakan halaman sitemap

Peta situs atau sitemap berisi daftar url halaman yang dimiliki oleh situs anda , kalau dalam sebuah buku .. sitemap di ibaratkan sebagai daftar isi yang memuat judul dan nomor halaman dimana mereka berada

Namun untuk sitemap yang terkait dengan website isinya lebih kompleks mencakup kapan terakhir kali di indeks , bagaimana prioritasnya dan seberapa sering googlebot harus merayapinya kembali dll

Mengirimkan sitemap seperti memberikan tour pada googlebot untuk menjelajah kedaftar halaman situs anda, seperti yang sudah saya jelaskan dari awal bahwa googlebot bekerja dengan merayapi setiap tautan link yang terdapat pada setiap halaman situs.

Bagaimana kalau ada halaman yang berdiri sendiri tanpa ditaut oleh internal link manapun ? itu membuat otoritasnya lemah sehingga google akan melewatkan halaman itu. Tidak ada salahnya kan mempermudah pekerjaan googlebot dengan mengirimkan peta situs?

Untuk memeriksa apakah url baru sudah ditambahkan kedalam sitemap atau belum silahkan gunakan fitur inspeksi url sekali lagi , cek status url anda disana . Scroll kebawah dibagian peta situs

Jika statusnya N/A berarti url tersebut belum ditambahkan kedalam sitemap tetapi kalau statusnya helmykediri.com/sitemap.xml berarti url tersebut telah ditambahkan kedalam daftar sitemap

Untuk blogger dan wordpress (kalau sudah install plugin sitemap) halaman sitemap biasanya terupdate secara otomatis jadi tidak ada yang perlu anda lakukan selain menunggu

Apakah ada cara untuk memberitahu google bahwa halaman sitemap anda harus segera diperbaharui ? sebenarnya ada tetapi saya jarang menggunakannya

Paste url berikut address bar , ganti url saya dengan url situs yang ingin dikirimkan sitemapnya

Ini akan mempercepat proses indeks halaman ke google

4. Hapus tag kakonik

Tag cannonical memberi tau google versi halaman yang diprioritaskan , anda mungkin melihat potongan kodenya seperti ini

<link rel=”canonical” href=”/page.html/”>

Sebagian halaman web tidak memiliki tag kanonis atau biasa disebut kanonis referrer private. Biasanya ini digunakan saat pengalihan permanen 301 atau berpindah domain. Tag kanonis memberi tau google bahwa halaman tersebut adalah yang asli dan mungkin satu-satunya dengan kata lain halaman itu harus di indeks

Tetapi sebagian besar situs plagiat di internet menggunakan tag kanonik jahat , mereka memberi tau google bahwa halaman mereka asli padahal tidak atau mungkin ini adalah bawaan template yang tidak pengguna sadari oleh sebab itu ketika terdapat halaman kanonik yang sama maka yang kedua tidak akan di indeks

Untuk memeriksa masalah terkait kanonik silahkan gunakan alat inspeksi url sekali lagi. Periksa url pada halaman tertentu

Lihat dibagian “alternate page with canonical tag” atau dalam bahasa indonesia ” kanonis yang dinyatakan pengguna”

Jika statusnya N/A berarti itu belum diatur tetapi apabila statusnya ada silahkan dihapus

Penggunaan tag kanonik tidak begitu disarankan , beberapa halaman memang memilikinya dengan berbagai alasan khusus. Jika itu adalah versi halaman yang anda sukai , tidak perlu menambahkan tag kanonis atau memodifikasinya

5. Jangan biarkan sebuah halaman berdiri sendiri

Maksud berdiri sendiri adalah halaman tersebut tidak memiliki link penunjuk internal link

Karena googlebot bekerja seperti laba-laba yang mengikuti setiap tautan link , maka apabila ada sebuah halaman yang berdiri sendiri tanpa ditaut oleh link manapun maka proses perayapan tidak dapat menemukan halaman tersebut. Halaman seperti ini biasanya di indeks dengan bantuan sitemap bukan oleh perayapan googlebot

Pastikan saat membuat satu postingan minimal menautkan satu internal link menuju halaman lain , ini akan memudahkan proses pengindeksan oleh googlebot

Halaman yang berdiri sendiri biasanya memerlukan waktu yang lebih lama untuk muncul dihasil penelusuran google , bagaimana untuk mengatasi hal ini :

> Jika halaman tersebut memang tidak penting silahkan hapus dari daftar sitemap atau biarkan saja

> Jika halaman itu cukup penting maka buat struktur tautan internal link kehalaman itu , sederhanakan?

6. Merubah attribut nofollow pada internal link

Ada 2 attribut dalam penggunaan hyperlink yaitu dofollow dan nofollow , tautan nofollow ditulis dengan tag rel =”nofollow” tanda ini mencegah transfer pagerank kehalaman lain

Google juga akan mengabaikan tautan link dengan attribut semacam ini , nofollow hanya di ikuti oleh visitor yang mungkin tertarik

Ini yang dikatakan google tentang link nofollow :

“Pada dasarnya, menggunakan nofollow menyebabkan kami membuang tautan target dari keseluruhan grafik web kami.  Namun, halaman target masih dapat muncul dalam indeks kami jika situs lain menautkannya tanpa menggunakan nofollow, atau jika URL dikirimkan ke Google dalam Peta Situs….”

Intinya , pastikan untuk semua tautan internal link tidak menggunakan attribut nofollow . Caranya saat menyisipkan link aktif jangan mencentang keterangan add ‘rel=nofollow’ attribute

Jangan gunakan tag nofollow pada internal link karena itu sama dengan perintah noindex untuk memblokir googlebot agar mengabaikan tautan tersebut

7. Bangun backlink

Googlespider mengikuti setiap tautan yang ada didalam website baik itu tautan internal link kehalaman lain maupun tautan eksternal ke website lain begitulah cara google menemukan setiap situs yang ada di internet

Jika anda tidak bisa membuat internal link karena suatu alasan (dibaca malas) anda bisa membuat tautan link aktif diwebsite orang lain kemudian mengarahkan kehalaman itu (dibaca backlink)

Namun internal link memiliki keunggulan yakni lebih cepat di indeks oleh google ketimbang backlink . Itulah sebabnya setelah menanam backlink dibeberapa situs para webmaster menggunakan alat indexer atau submissions agar backlink tersebut segera di indeks oleh google

Mengapa internal link lebih kuat ? karena google cenderung menyusun kembali halaman dibawah root domain yang sama lebih cepat dibandingkan halaman yang terpisah dari luar

Bagaimana melihat halaman yang miskin tautan ? itu ditandai dengan skor PA (page authority) atau DR (domain authority) yang rendah

Anda bisa menggunakan alat audit dari ahrefs tetapi itu berbayar oleh sebab itu saya akan tunjukkan versi gratisnya

> Buka situs ini https://www.onlinesales.co.uk/tools/tools/bookmarklet-serps.php lalu anda akan melihat button hijau “serps18” silahkan diseret ke header bookmark dibawah menu

> Buka google > setelan > hasil perhalaman rubah menjadi 50

> Kembali ke penelusuran , gunakan query site:domain.com kemudian tekan tombol bookmark “serp18” otomatis terbuka tab baru silahkan dicopy paste daftar url pada kolom link

> Gunakan layanan pengujian untuk cek nilai DA PA misal menggunakan MOZ gratisan atau thehoth terserah

Hasilnya kurang lebih seperti ini:

Lihat pada halaman dengan PA yang rendah kurang dari 5 , itulah halaman yang membutuhkan perhatian atau backlink

Untuk mempercepat index backlink gunakan layanan linkcentaur , pingbomb , linksmanagement dll

Baca juga: Backlink premium gratis di seoestore

8. Pastikan halaman tersebut bernilai

Untuk apa mengoptimasi halaman berkualitas rendah yang bahkan minim pencarian ? ini yang dikatakan pak john mueller tentang indeks pada tahun 2018 lalu

“Kami tidak pernah mengindeks semua URL yang dikenal, itu cukup normal. Saya akan fokus membuat situs ini luar biasa dan inspiratif, lalu segala sesuatunya berjalan lebih baik.”

Mereka menyiratkan bahwa jika ingin sebuah halaman di indeks oleh google maka itu harus mengagumkan dan menginspirasi (dibaca berharga)

Jika anda mengeluh beberapa halaman disitus sulit terindeks dimesin pencari bahkan setelah berhari-hari coba tanyakan pada diri sendiri apakah halaman tersebut cukup berharga atau tidak ? apa yang pengguna bisa temukan dari halaman tersebut ? apakah itu lebih baik dari milik kompetitor ?

Jika jawabannya tidak , maka anda harus meningkatkan kualitas konten

Halaman yang tidak berharga ditandai dengan :

> Konten tipis kurang dari 500 kata

> Bukan artikel yang dibutuhkan atau dicari pengguna internet

Bagaimana memfilternya ? kalau anda menggunakan ahrefs itu mudah (buka url profile > pilih no of content words masukkan 500)

Anda juga harus memperbaiki konten duplikat atau hampir mirip karena google akan mengabaikan konten yang dianggap tidak memberikan manfaat lebih bagi penggunanya , gunakan alat seperti copyscape untuk memeriksa duplikat

9. Menghapus halaman berkualitas rendah

Memiliki banyak konten memang bagus tetapi apabila semuanya berkualitas rendah itu hanya membuang crawl budget dan menurunkan durasi perayapan

Ini yang dikatakan google :

“Membuang-buang sumber daya server pada [halaman bernilai tambah rendah] akan mengeringkan aktivitas perayapan dari halaman yang benar-benar memiliki nilai, yang dapat menyebabkan keterlambatan yang signifikan dalam menemukan konten hebat di situs..”

Pikirkan itu sebagai ujian , jika anda diberikan 10 soal maka anda bisa menyelesaikanya dalam waktu singkat tetapi saat anda diberikan 100 soal maka itu memakan waktu yang lebih lama. Anda benar-benar terbebani secara mental dan pikiran sehingga mungkin beberapa soal tidak sempat terjawab

Google merayapi sebuah website dengan jumlah index yang dibatasi untuk sekali perayapan , google tidak masalah dengan jumlah itu tetapi untuk website dengan ribuan url sebagian besar membutuhkan waktu yang lebih lama

Menghapus halaman berkualitas rendah bukanlah ide yang buruk justru itu memberikan efek positif dengan memberikan kuota index yang lebih besar

Buka halaman daftar post > cari mana artikel yang isinya kurang penting dan hapus

10. Fokus pada backlink berkualitas tinggi

Tautan balik memberi tahu Google bahwa halaman web itu penting. Lagi pula, jika seseorang menautkannya, maka itu harus memiliki nilai. Ini adalah halaman yang ingin di indeks oleh Google.

Google tidak hanya mengindeks halaman web dengan backlink. Ada banyak (milyaran) halaman yang di indeks meskipun tanpa backlink. Namun, Google melihat halaman dengan tautan berkualitas tinggi sebagai hal yang lebih penting, mereka cenderung untuk dirayapi

Kriteria backlink berkualitas baik :

> Berasal dari situs yang aktif dengan visitor harian minimal 10ribu

> Berasal dari situs yang sudah mapan minimal berumur 3 tahun

> Backlink berada didalam artikel blog atau bio penulis

> Dilengkapi dengan anchor teks yang relevan terhadap halaman yang dirujuk

> Berasal dari web dengan reputasi yang baik

Nah itu dia 10 cara mengatasi website yang susah di indeks oleh google semoga bermanfaat . Tulisan ini dibuat berdasarkan pengalaman dan referensi dari situs ternama (ahrefs) mungkin belum semuanya tetapi saya harap bermanfaat bagi pembaca

Sekian dan terimakasih

Oleh https://helmy kediri.com