CARA SETTING ROBOT.TXT KHUSUS TEMPLATE BLOGSPOT

Sebagai blogger setidaknya kita mengetahui apa yang dimaksud dengan robots.txt khusus ? File robots.txt merupakan cara terbaik bagi para webmaster untuk mengontrol setiap halaman web pada mesin telusur. Secara singkat robots.txt dapat memabantu kita untuk mengontrol setiap konten yang ada pada web kita apakah konten tersebut boleh di rayapi oleh web crawler dan diindeks oleh mesin telusur atau sebaliknya. Untuk dapat lebih jelas memahami pengertian dari file robots.txt ini Anda dapat membaca artikelnya dibawah ini.

Setelah kita paham mengenai pengertian dan fungsi utama dari robots.txt maka selanjutnya kita dapat mencoba mempraktekan atau menerapkannya kedalam blog kita. Tujuan utama mengaktifkan robots.txt ini adalah untuk mengontrol setiap konten atau halaman yang boleh dirayapi dan diindeks oleh mesin telusur, misalnya saja laman archive dan label kedua laman ini memang tidak seharusnya kita tampilkan pada mesin telusur karena tidak mengarah pada konten seseungguhnya. Namun, bagi yang tetap ingin mengindeks halaman archive dan label maka Anda bisa mengaturnya sendiri sesuai kebutuhan.

Bagaimana Cara Mengaktifkan Robots.txt di Blogger ?

Secara default robots.txt pada blogger nonaktif, oleh karena itu kita perlu mengaktifkannya dan mengatur laman mana saja yang perlu diindeks mesin telusur. 

Berikut cara setting robots.txt khusus di blogspot :

Cara Setting Robots.txt Khusus di Blogspot Workflow

1. Masuk ke Blogger.com

2. Lalu klik pada bagian Setelan > Preferensi Penelusuran

3. Kemudian masukkan file robots.txt dibawah ini

User-agent: Mediapartners-Google

Disallow:

User-agent: *

Disallow: /search

Allow: /

Sitemap: http://otobemoberodatiga.blogspot.com/feeds/posts/default?orderby=UPDATED

4. Lalu klik simpan perubahan

Catatan :

- http://otobemoberodatiga.blogspot.com ganti dengan URL blog Anda.

File robots.txt diatas merupakan robots.txt yang standar dan paling banyak digunakan oleh para blogger. Untuk mengetahui mengetahui jenis-jenis file robots.txt lainnya Anda bisa membacanya pada artikel selanjutnya.

Setelah mengaktifkan fitur robots.txt pada blogspot, kita juga perlu mengatur pada bagian tag tajuk robot khusus fitur ini juga sama fungsinya hanya saja yang ini untuk mengontrol pada bagian laman konten di blogspot, nah dalam mengaktifkannya Anda perlu berhati-hati kalau salah bisa-bisa konten yang kita tulis malah tidak terindex. Lalu bagaimana cara setting tag tajuk robot khusus ini, akan kita bahas pada artikel selanjutnya.

Semoga dengan mengaktifkan file robots.txt pada blogger dapat memaksimalkan lagi hasil penelusuran konten kita pada mesin pencari sehingga blog kita bisa rampai di penuhi pengunjung. Jadi cobalah untuk mengaktifkannya tapi jika Anda masih ragu silahkan untuk tidak mengaktifkannya. Tetapi jika Anda berani dengan resikonya bisa Anda coba dengan mengaktifkan file robots.txt ini karena hasilnya juga akan memuaskan asalkan kita benar dalam memberikan perintah pada file robots.txt tersebut. Baca Juga : Cara-setting-tag-tajuk-robot-khusus

Bagaimana Reaksi Anda Tentang Artikel Ini?