Cara Mengaktifkan Dan Setting Robots.txt di Blogger

Cara ...

Cara Mengaktifkan Dan Setting Robots.txt di Blogger

MANGYONO.com - Robots Exclusion Protocol atau robots.txt protokol, adalah sebuah konvensi untuk mencegah web crawler bekerja sama dengan robot web lain untuk mengakses semua atau bagian dari sebuah website yang jika dilihat secara terbuka.

Robot sering digunakan mesin pencari untuk mengkategorikan dan mengarsip situs web, atau web master untuk mengkoreksi Source code. Sesuai yang saya baca, ternyata mengaktifkan robots.txt ini bisa mendongkrak SEO blog.

Cara Mengaktifkan Dan Setting Robots.txt di Blogger

Berikut ini cara mengaktifkan dan setting robots.txt:
1. Pertama log in ke blogger sobat.
2. Klik setelan > Preferensi penelusuran / Search preferences.

3. Pada tab perayap dan pengindeksan pilih robot.txt. Lihat Gbr.2

Gbr.2 : Cara Mengaktifkan Dan Setting Robots.txt di Blogger

4. Lalu masukkan tulisan dibawah ini:

    User-agent: Mediapartners-Google
    Disallow:

    User-agent: *
    Disallow: /search
    Allow: /

    Sitemap: http://mangyono.blogspot.com/feeds/posts/default?orderby=UPDATED