Cara Mudah Setting Robot.txt di Blogger

Robot.txt - Hi Guys! Kali ini saya akan membahas bagaimana cara setting Robot.txt di blogger dengan mudah. Artikel ini bertujuan agar mesin Pencarian Google mudah untuk dirayapi (Crawling) Sehingga artikel akan lebih cepat terindex di Google. Namun banyak blogger yang belum mengetahui cara keja robot.txt ini.

Karena itu dibutuhkan settingan yang aman agar blog tidak mengalami efek yang negaif. Penerapan default inilah yang paling aman menurut saya, tapi kalau anda mau melakukan konfigurasi tambahan silahkan anda tambahkan sendiri.

Apa Itu Robot.txt?

Robot.txt adalah sebuah rangkaian file berbentuk text yang berisi intruksi untuk mem-bot saat membuat website yang anda kelola dalam mesin pencarian. Belajar SEO pada awalnya mungkin gampang-gampang hese "susah". Apalagi setelah mengetahui dan ingin mencoba memaksimalkan fungsi SEO dengan mengotak-atik robot.txt pada website yang anda miliki.

Cara Setting Robot.txt di Blogger

• Silahkan anda login ke Blogger.
• Pilih menu Setelan => Preferensi Penelusuran => Perayap dan Pengindeksan => Robot.txt khusus => klik Edit.

• Pada pilihan Dinonaktifkan custom robot.txt khusus? silahkan kamu klik Ya. Selanjutnya silahkan anda masukan settingan robot.txt dibawah ini. 

User-agent: Mediapartners-Google
Disallow: 

User-agent: *
Disallow: /search
Allow: /

Sitemap: https://www.domainkamu.com/sitemap.xml

Catatan:
User-agent: Mediapartners-Google (Penanda bahwa blog menggunakan AdSense)
Disallow: (Yang tidak dibolehkan tidak ada)
User-agent:* (Semua robot mesin pencari)
Disallow:/ search (Tidak mengijinkan url setelah /search seperti .../search/label dan ... search/search?updated...)
Sitemap: https://www.domainkamu.com/sitemap.xml (Sitemap/ peta situs blog)

• Kalau sudah klik Simpan.

Untuk mengecek apakah robot.txt anda sudah berfungsi atau belum silahkan buka URL berikut:

https://www.domainkamu.com/robots.txt

Sampai disini dulu, Cara Mudah Setting Robot.txt di Blogger, semoga berhasil dan mudah dipahami. Apablia ada pertanyaan jangan sungakan-sungkan silahkan comment dibawah. Sekian dan Terima Kasih.