Penjelasan tentang Googlebot
Googlebot menjelajahi banyak halaman website dengan cara mengikuti link-link yang ada. Googlebot mengikuti link-link yang ada sehingga bisa sampai ke halaman yang lain. Halaman website baru untuk dapat terindex harus mendapatkan link dari halaman yang lain yang sudah terindex oleh google, semisal: halaman A sudah ter-index Google, anda mempunyai halaman B (yang baru anda buat tadi malam), yang anda lakukan supaya halaman B dapat ter-index oleh google adalah anda memasang link dari halaman A ke halaman B paling sedikit dua link (Tips. tapi letakkan 2 link yang menuju halaman B tadi agak berjauhan).
Referensi: http://www.01-bot.id.or.id/googlebot/google_submit_search_engine/
Berikutnya penjelaan tentang 2 versi Googlebot yaitu Freshbot dan Deepbot
Freshbot
Freshbot meng-crawl website dan mencari fresh content. Freshbot mengunjungi website yang frekwensi berubahnya tinggi, tergantung seberapa frekwebsi berubahnya, jika frekwensi content website anda tinggi maka Fresh bot akan sering datang ke rumah anda, (nah loe..siapkan kopi sama snack), Googlebot hanya mengikuti Href link dan SRC link.
Deepbot
Deepbot mencoba untuk mengikuti setiap link dalam sebuah website dan men-download sebanyak mungkin halaman website anda. Proses ini akan selesai sekitar sebulan sekali
Nah sangat penting anda memasang script PHP yang saya bikin untuk memasang perangkap “jejak”
tutorial script nya ada di sini:
http://www.ilmuwebsite.com/detil_php_tutorial/2/_Membuat_System_LOG_dengan_FLAT_FILE/
sehingga apabila googlebot datang ke website anda maka jejak nya akan tertangkap dan anda bisa melihat kapan mereka datang.
Sumber: http://www.ilmuwebsite.com
Terimakasih Mr. Google telah membuat kita jadi pintar. Google(guru besar orang2 yang butuh petunjukmu).
Amar's Web-BLog 