Banyak yang menyarankan agar situs atau blog Anda dengan mudah muncul di laman hasil pencari maka perlu membiarkan para robots mesin telusuri menjelajahi situs atau blog Anda. Namun jika Anda memiliki konten yang sifatnya pribadi sebaiknya Anda membatasi ruang gerak para robots mesin telusur. Selain dengan menggunakan robots.txt ternyata ada banyak cara lain sebagaimana seperti yang ditunjukkan pada video di bawah ini.
Baca selengkapnya
Cara Batasi Robots Mesin Telusur »