Cara Mengatur Robots.txt di Blogger

Cara Mengatur Robots.txt di Blogger

Cara Mengatur Robots.txt di Blogger – Halo, pada kesempatan kali ini saya ingin share mengenai cara setting robots.txt yang benar di blogger. Pada dasarnya blogger memiliki robots.txt sendiri untuk crawler secara otomatis, dan robot crawler akan otomatis membaca file.txt pada blog yang mereka telusuri.

Agen Bola Terpercaya, Judi Taruhan Bola, Agen Sbobet dan Bola Tangkas

Berikut adalah pengaturan robots.txt yang benar yang bisa anda tambahkan ke pengaturan blogger anda.

Mengatur Robots.txt di Blogger

  • Masuk ke Blogger – Setelan – Preferensi penelusuran
  • Pada opsi Perayap dan Penindeksan pilih robots.txt khusus – pilih Ya
  • Masukan kode berikut:

User-agent: Mediapartners-Google
Disallow:User-agent: *
Disallow: /search
Allow: /

Sitemap: http://ubloger.com/sitemap.xml

  • Pada bagian http://ubloger.com/sitemap.xml, bisa anda ganti dengan sitemap blog anda yang di daftarkan di Webmaster Tools
  • Sekarang Simpan Perubahan
  • Untuk menguji apakah pengaturan robots.txt sudah sesuai copy kode berikut dan paste di adress bar browser – Enter

http://Namablog.blogspot.com/robots.txt

  • Ganti Namablog dengan nama blog anda

Pengertian Robots.txt

Robots.txt adalah perintah yang ditujukan kepada mesin pencari di internet sebelum menelusuri semua isi konten sebuah blog atau website. Robots.txt akan membaca file.txt terlebih dahulu apakah diijinkan untuk melakukan crawler atau tidak.

Nah disinilah yang dimaksud satu kesalahan mengatur robots.txt bisa menjadikan mesin penelusur mengabaikan blog kita.

Leave a Reply

Your email address will not be published.