Cara Mengatur Robots.txt di Blogger

By | 21 May 2015

Cara Mengatur Robots.txt di Blogger

Cara Mengatur Robots.txt di Blogger – Halo, pada kesempatan kali ini saya ingin share mengenai cara setting robots.txt yang benar di blogger. Pada dasarnya blogger memiliki robots.txt sendiri untuk crawler secara otomatis, dan robot crawler akan otomatis membaca file.txt pada blog yang mereka telusuri.

Berikut adalah pengaturan robots.txt yang benar yang bisa anda tambahkan ke pengaturan blogger anda.

Mengatur Robots.txt di Blogger

  • Masuk ke Blogger – Setelan – Preferensi penelusuran
  • Pada opsi Perayap dan Penindeksan pilih robots.txt khusus – pilih Ya
  • Masukan kode berikut:

User-agent: Mediapartners-Google
Disallow:User-agent: *
Disallow: /search
Allow: /

Sitemap: http://www.uceng999.com/sitemap.xml

  • Pada bagian http://www.uceng999.com/sitemap.xml, bisa anda ganti dengan sitemap blog anda yang di daftarkan di Webmaster Tools
  • Sekarang Simpan Perubahan
  • Untuk menguji apakah pengaturan robots.txt sudah sesuai copy kode berikut dan paste di adress bar browser – Enter

http://Namablog.blogspot.com/robots.txt

  • Ganti Namablog dengan nama blog anda

Pengertian Robots.txt

Robots.txt adalah perintah yang ditujukan kepada mesin pencari di internet sebelum menelusuri semua isi konten sebuah blog atau website. Robots.txt akan membaca file.txt terlebih dahulu apakah diijinkan untuk melakukan crawler atau tidak.

Nah disinilah yang dimaksud satu kesalahan mengatur robots.txt bisa menjadikan mesin penelusur mengabaikan blog kita.

Vimax Canada
Category: Blogging Tags:

About s.magi

Jangan berpikir dua kali, ragu-ragu tak memberi kepastian. Mulai bertanya, biar penasaranmu terpuaskan. Gerakkan dunia, jangan biarkan dunia yang menggerakkanmu. Tuliskan kisah hidupmu, hidup terlalu singkat untuk alur kisah orang lain. Melangkahlah kemana hati ini melangkah. Go a head !!!

Leave a Reply

Your email address will not be published.