Cara Mengaktifkan Robot.txt - Informasi Sosial Media

Artikel ini lanjutan dari (PART 4), bagi yang belum membaca artikel sebelumnya bisa liat di sini
Cara Agar Blog Tidak Bisa Di Copas

Cara Mengaktifkan Robot.txt protocol

Robot.txt???

Pengguna Blogger yang masih awam pasti sangat menyepelekan  hal ini, fungsinya memang sulit untuk dikenali, Robot.txt ini memang terlihat seperti tidak penting.
Tapi jika kamu tau apa Robot.txt dan apakah fungsi dari Robot,txt, maka di jamin kamu akan serius untuk menanggapi hal ini. Langsung aja ke pembahasannya.

       Robot.txt adalah sebuah konvensi yang berguna untuk mencegah web lain mengakses seluruh bagian
Web kita. Jadi Robot.txt ini bisa kita ibaratkan sebagai satpam yang menjaga blog kita, Jadi jika kita meletakkan satpam kita dibelakang halaman, secara otomatis pak satpam tidak bisa mengontrol siapa saja yang masuk ke halaman kita, secara otomatis pengunjung yang masuk ke halaman kita akan bertindak sewenang-wenang, mereka bisa saja masuk kehalaman yang dilarang dan mungkin itu sangat membahayakan, dan disinilah fungsi dari Robot.txt, mengontrol dan memberi pengarahan kepada pengunjung dengan memberi tahu halaman apa saja yang mereka boleh kunjungi. Pengunjung yang dimaksud adalah sebuah perayap atau robot milik Search  Engine yang bertugas untuk mengcrawler dan mengindex seluruh isi situs kita.



Cara umum yang sering digunakan oleh Webmaster dan saran saya sebaiknya kamu juga menggunakan cara ini.

1. Silahkan kamu login ke dalam blogger mu terlebih dahulu.
2. Kemudian Klik > "Setelan">    lalu >     "Preferensi penelusuran"
3. Dan masukan script di bawah ini :                                                                                                       User-agent: Mediapartners-Google
   Disallow:
   
   User-agent: *
   Disallow: /search
   Allow: /
   
   Sitemap: http://namablogkamu.blogspot.com/feeds/posts/default?orderby=UPDATED

Ganti url http://namablogkamu.blogspot.com dengan url blog anda.

Keterangan:

• Kelompok baris pertama merupakan informasi user agent milik google menandakan bahwa blog ini adalah partner dari google, hal ini memudahkan bagi anda yang ingin menggunakan jasa google adsense agar iklan yang nantinya ditampilkan relevan dengan isi blog anda, juga memberitahukan bahwa blog kita bisa diakses melalui mesin pencari.

• Kelompok baris kedua adalah informasi untuk semua mesin crawler search engine. Disana dituliskan disallow:/search  yag menandakan semua robot mesin pencari tidak boleh mengindeks page label. yang ini berguna untuk menegah duplikasi artikel yang sangat tidak disukai oleh google.

• Kelompok baris ketiga merupakan sitemap yang berfungsi memudahkan mesin pencari mengindeks blog anda

• Tanda "/" adalah tanda home page anda jadi jangan hanya meletakkan tanda ini pada kolom disallow karena berakibat mesin pencari tidak bisa mengindex home anda

Eiitttssss.....belum selesai ikuti lagi langkah - langkahnya.

6. Masih di menu setting Search preferences / Preferensi penelusuran
7. Dibagian paling bawah ada menu Custom robots header tags / Tag 
    Tajuk Robot Khusus. Klik edit.
8. Pilih yes
9. Akan muncul kotak settingan, samakan setingan tag mu sama seperti gambar dibawah ini :

5. Save changes

Satu lagi catatan agar berhati-hati untuk menggunakan fungsi ini karena jika salah-salah malah blog anda yang diabaikan oleh mesin pencari.

Selamat kepada yang sudah berhasil menerapkan semua Part, dari part pertama sampai part yang terakhir, tapi masih belum selesai sob...he he he yuuk lanjut ke part berikutnya Panduan Membuat Blog (PART 6) mengenai Cara Mengatasi Spammer.