Kali ini saya akan share mengenai cara setting robots.txt SEO Friendly dan
aman untuk para blogger agar blog anda lebih optimal di mesin pencari.
Apa Itu robots.txt?
robots.txt atau yang biasa dikenal sebagai protokol pengecualian robot atau
protokol robots.txt adalah sebuah ketentuan para pengguna blog untuk mencegah
web crawler dan robot web lain, dari pengaksesan seluruh atau sebagian
