Cara Setting Robots.txt di Dashboard Blogger yang Baru

Cara Setting Robots.txt di Dashboard Blogger yang Baru - Setiap blogger pasti ingin semua postingan atau artikel yang dia tulis selalu muncul di halaman pencarian Google, terutama dihalaman pertama hasil pencarian Google.

Ada kalanya kita juga perlu untuk memblokir halaman blog yang semestinya tidak perlu ditampilkan (baca: index) di halaman hasil penelusuran Google, misal seperti halaman Kontak, About, halaman khusus error 404, dan lain sebagainya.

Lanjut ke pokok permasalahan.

Apa sih robots.txt itu?

File robots.txt memberi tahu crawler mesin telusur halaman atau file mana yang dapat atau tidak dapat diminta dari situs. File ini digunakan terutama untuk menghindarkan situs Anda dari beban permintaan yang terlampau banyak; file ini bukanlah mekanisme untuk menyembunyikan halaman web dari Google. (sumber: developers google)

Lalu apa fungsi dari robots.txt?

Robots.txt digunakan terutama untuk mengelola traffic crawler ke situs Anda, dan biasanya untuk menyembunyikan halaman dari Google. (sumber: developers google)

Ok itu sedikit penjelasan mengenai silsilah robots.txt ya, sekarang kita kembali ke pokok permasalahan.

Mungkin jika kamu melakukan pencarian tentang cara setting robots.txt di Google akan banyak menemukan toturial yang berbeda, sebenarnya tidak berbeda hanya saja tampilan dashboard Blogger yang baru sudah berbeda dari tampilan Blogger yang lama.

Lihat juga: Cara Memberi Link Pada Formulir Komentar Blog

Jadi mungkin kamu yang baru dalam dunia blog khususnya pengguna Blogger akan sedikit kebingungan, karena tampilan/gambar dalam tutorial yang kamu temukan di Google tidak sama dengan dashboard Blogger yang kamu gunakan.

Memang beberapa waktu lalu Blogger melakukan perubahan dalam hal kinerja dan tampilan pada halaman Blogger, jadi kebanyakan dari kita masih asing dengan tampilan baru Blogger.

Disini saya hanya khusus untuk membahas cara setting robots.txt pada tampilan dashboar Blogger yang baru.

Baca lainnya: Cara Menghilangkan Link Aktif di Komentar Blog

Ok kita langsung praktekin cara setting robots.txt di halaman blogger.com yang baru.

1. Login ke Blogger.com

2. Pilih menu Setelan/Setting - Crawler dan pengindeksan

3. Aktifkan robots.txt kustom (geser radio button ke kanan)

4. Pada robots.txt kustom isi dengan kode berikut

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Sitemap: https://www.wahyuiwe.com/sitemap.xml

Ganti "www.wahyuiwe.com" dengan alamat blog kamu.


5. Aktifkan tag header robot kustom (lihat gambar 1)

6. Pada Tag halaman Beranda, silahkan pilih All.

7. Pada Tag arsip dan halaman penelusuran, silahkan centang semua kecuali All dan unavailable_after.

8. Pada Tag postingan dan halaman, silahkan pilih All.


Dari semua langkah di atas jangan lupa untuk menyimpannya.

Demikian cara setting robots.txt di dashboard Blogger yang baru, semoga bermanfaat, sampai ketemu di postingan berikutnya.

Latest
Buka komentar
Tutup komentar

8 comments:

  1. Alhamdulillah kak toan... yt gik arangkak wkwkwk... :D

    ReplyDelete
  2. terima kasih, ternyata di interface blogger yang baru agak berbeda ya... sudah saya update blog saya sama seperti saran mas bro...

    ReplyDelete
  3. mau tanya, saya buat blog baru dengan custom TLD, kira-kira sampai berapa minggu semua postingan muncul di parameter site:www.blogsaya.com ?

    ReplyDelete
    Replies
    1. kalo pengalaman saya pribadi untuk blog ini sendiri waktu baru-barunya ganti ke TLD kurang lebih 1 bulan untuk 200an postingan!

      Delete
    2. terima kasih sudah dijawab pertanyaan saya... mau tanya lagi, kan blog saya masih baru, belum ter-index google dan muncul di hasil pencarian, lebih baik posting artikel terus atau tunggu dulu sampai ter-index google?

      Delete
    3. Posting aja terus, jangan mikir yang berat2 dulu, cukup berfikir bahwa postingan kita bertujuan untuk diri kita dan membantu orang lain (pembaca). Hal ini biasa saya lakukan agar tidak cepat bosan jika sesuatu yang saya targetkan belum tercapai! namun jangan berhenti berusaha dan belajar, semoga sukses!

      Delete
  4. Makasih mas postingannya, sudah saya terapkan diblog saya mas.

    ReplyDelete