Banyak orang bingung mengapa begitu lama sekali postingan artikel kita belum terindeks juga di SERP search engine google?. Padahal jika mereka mengetik artikel baru atau fresh content akan terindeks saat itu juga. Apa yang mengakibatkan itu semua?
Sebelumnya kita perlu mengetahui kalau Googlebot itu ada dua jenis macamnya, yaitu Freshbot, dan Deepbot. Jadi bagaimana kedua jenis Googlebot ini memasukkan blog anda ke dalam index Google?
Apa Itu Freshbot?
Freshbot itu kerjanya memantau apakah ada konten baru yang kita miliki. Setiap website mempunyai tingkat perayapan yang berbeda, tergantung kualitas backlinknya atau bisa juga nilai pageranknya….dan frekuensi updatenya…. Perbedaan tingkat perayapan ini yang membuat ada blog yang artikel barunya (fresh content) sekejap mata langsung terindeks dan ada yang harus menunggu beberapa hari….
Jadi kalau mau fresh content terindeks sekejap, ya cari backlink-backlink berkualitas (berasal dari situs yang perayapannya juga tinggi), dan jaga frekuensi update artikel barunya….
Lalu Apa Yang Dimaksud Dengan Deepbot?
Nah, lain kasus dengan artikel lama yang diedit. Itu bukan jatahnya freshbot lagi melainkan jatahnya deepbot yang sebulan sekali melakukan perayapan total untuk semua link, file, download, dll di dalam situs kita. Deepbot ini menurut pantauan; — rata-rata aktif tanggal 20 sampai akhir bulan untuk setiap bulannya.
Saat deepbot ini datang, maka blog kita akan dirayapi selama 2-7 hari ke depan. Pada periode inilah perubahan atas artikel-artikel tua masuk ke dalam index sehingga bisa ditayangkan di SERP. Jadi mensubmit ulang sitemap tidak akan membantu pengindexan ulang artikel lama….
Kalau kita mengubah artikel lawasnya tepat diakhir kunjungan deepbot, maka kita harus menunggu 20-27 hari ke depan untuk perubahannya. Tapi kalau kita mengeditnya pas deepbot datang, ya bisa cepat indeks ulangnya….
Ada juga kasus di mana saat kita membuat blog baru kadang dirayapi freshbot dulu sebelum deepbot. Kalau Freshbot yang lebih dulu, maka artikel akan masuk dalam index selama beberapa hari sebelum terhapus…. Biasanya kalau ini terjadi akan dianggap sebagai honeymoon….
Bagi pengguna web yang dihosting, maka anda bisa mengintip ke dalam log untuk melihat kedatangan Googlebot. Kalau robotnya memakai IP 64.* maka itu freshbot, tapi kalau IP-nya 216.* maka itu deepbot…. Tapi siapapun yang datang tampilan user agentnya sama saja yaitu Googlebot/2.1
Kalau ternyata sudah cukup lama anda menanamkan backlink dan tidak ada perayapan alias tidak masuk indeks, maka pertanyaannya adalah apakah halaman blog anda bisa dirayapi oleh Googlebot itu sendiri. Kalau ternyata tidak bisa, maka perbaiki dulu akar masalahnya….
Mudah-mudahan info singkat ini ada gunanya….