Googlebot mempunyai dua versi Freshbot dan Deepbot

Googlebot adalah robot yang di kirimkan oleh Google untuk mengambil informasi yang update dari website anda,
ya... tentunya jika web anda sudah terindex oleh google

Nah di sini saya akan coba menjelaskan tentang dua versi Googlebot yaitu Freshbot dan Deepbot

Freshbot
Freshbot meng-crawl website dan mencari fresh content. Freshbot mengunjungi website yang frekwensi berubahnya tinggi, tergantung seberapa frekwebsi berubahnya, jika frekwensi content website anda tinggi maka Fresh bot akan sering datang ke rumah anda, Googlebot hanya mengikuti Href link dan SRC link.

Deepbot
Deepbot mencoba untuk mengikuti setiap link dalam sebuah website dan men-download sebanyak mungkin halaman website anda. Proses ini akan selesai sekitar sebulan sekali

Nah sangat penting anda memasang script PHP yang saya bikin untuk memasang perangkap "jejak"
tutorial script nya ada di sini:
Membuat System LOG dengan FLAT FILE

Sehingga apabila googlebot datang ke website anda maka jejak nya akan tertangkap dan anda bisa melihat kapan mereka datang...

Penjelasan tentang Googlebot
Googlebot menjelajahi banyak halaman website dengan cara mengikuti link-link yang ada. Googlebot mengikuti link-link yang ada sehingga bisa sampai ke halaman yang lain. Halaman website baru untuk dapat terindex harus mendapatkan link dari halaman yang lain yang sudah terindex oleh google, semisal: halaman A sudah ter-index Google, anda mempunyai halaman B (yang baru anda buat tadi malam), yang anda lakukan supaya halaman B dapat ter-index oleh google adalah anda memasang link dari halaman A ke halaman B paling sedikit dua link (Tips. tapi letakkan 2 link yang menuju halaman B tadi agak berjauhan).