Cara setting robot.txt di blog  - Pada kesempatan kali ini saya akan lanjutkan membahas tentang tips dan trick blog : cara setting robot.txt di blog. Ada beberapa pelajaran yang saya ambil dari para master blog tentang cara setting robot.txt di blog saya ini agar lebih seo ( search engine optimization ) friendly dan untuk meningkatkan traffic dalam blog.

Sebenarnya tanpa mengaktifkan robot.txt di blog secara manual pun blog kita tetap akan terindex oleh search engine dan tidak ada masalah jika sahabat tidak meng custom setting robot.txt di blog nya., karena pada blog bawaan blogger telah tersedia robot.txt. Tapi buat sahabat yang ingin lebih mengoptimalkan robot.txt agar blog lebih seo Friendly bisa menggunakan custom setting robot.txt yang akan saya bagikan.  Untuk lebih jelasnya silahkan sahabat simak baik baik langkah yang saya bagikan berikut ini :

Cara Setting Robot.txt di Blog

1. Silahkan sahabat login terlebih dahulu di blogger.com

2. Pilih blog sahabat >>setting>>search and preferences>>klik edit custom robot.txt

3. Setelah itu akan terbuka kotak kosong pada edit custom robot.txt tersebut. Silahkan sahabat copy kode baris perintah robot.txt di bawah ini dan pastekan pada kotak kosong tadi. Berikut kode baris perintah robot.txt nya :

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Sitemap: http://sata17.blogspot.com/feeds/posts/default?orderby=UPDATED

Catatan : Silahkan sahabat ganti http://sata17.blogspot.com diatas dengan URL blog sahabat sendiri.

4. Klik save dan selesai.

Penjelasan mengenai kode baris perintah robot.txt di atas. 

  User-agent: Mediapartners-Google
  Disallow: 

  

Maksud kode baris perintah ini adalah mengijinkan kepada user-agen google adsense untuk meng crawl seluruh isi blog sahabat agar bisa menampilkan iklan secara relevan pada blog sahabat. Jika sahabat ingin menggunakan google adsense pada blog sahabat , sebaiknya kode baris ini jangan dihapus. Jangan mengotak atik kode baris perintah ini agar iklan google adsense bisa relevan dengan isi blog sahabat.

User-agent: *
Disallow: /search
Allow: /

Maksud kode baris perintah kedua ini adalah mengijinkan kepada seluruh user-agen search engine untuk meng crawl seluruh isi blog sahabat kecuali directory yang berisi labels di blog sahabat. Sahabat bisa lihat Disallow: /search yang berfungsi untuk melarang bot search engine meng crawl directory labels ini.

Sitemap: http://sata17.blogspot.com/feeds/posts/default?orderby=UPDATED

Maksud kode baris perintah robot.txt ini perintah menambahkan sitemap dengan post artikel blog sahabat terupdate agar postingan blog sahabat lebih cepat terindex search engine.

Demikian pembahasan saya mengenai cara setting robot.txt  di blog. Semoga artikel saya mengenai tips dan trick blog : cara setting robot.txt di blog ini bermanfaat dan terima kasih.