296 Blog - 

Panduan Setting Robots.txt dan Tag Prosedur Header Kustom Terbaik di Blogspot

Pernah nggak sih kamu merasa sudah rajin bikin artikel berkualitas, tapi traffic blog gitu-gitu aja? Atau bahkan artikel kamu susah banget muncul di halaman pencarian Google?

Bisa jadi, masalahnya bukan pada tulisan kamu, melainkan pada robot Google yang bingung saat merayapi (crawling) blogmu.

Nah, di platform Blogger (Blogspot), ada dua fitur krusial yang mengatur jalannya robot mesin pencari ini, yaitu Robots.txt dan Tag Prosedur Header Kustom. Kalau salah setting, bisa-bisa artikel kamu malah "tersembunyi" dari Google.

Biar nggak salah langkah, yuk simak Panduan Setting Robots.txt dan Tag Prosedur Header Kustom Terbaik di Blogspot yang sudah dirangkum khusus buat kamu. Dijamin mudah dipahami, bahkan buat pemula sekalipun!

Apa Itu Robots.txt dan Mengapa Penting?

Sebelum masuk ke tutorialnya, kita kenalan dulu secara singkat.

Bayangkan blog kamu adalah sebuah rumah besar. Robots.txt adalah satpam di depan rumah yang memegang daftar aturan. Satpam ini yang memberi tahu robot Google (Googlebot) bagian rumah mana saja yang boleh dimasuki dan bagian mana yang rahasia (tidak boleh diindeks).

Secara bawaan (default), Blogger sebenarnya sudah menyiapkan pengaturan robots.txt otomatis yang sudah cukup aman. Tapi, mengaktifkan fitur kustom akan memberi kamu kendali penuh agar proses indexing blog jadi jauh lebih optimal dan rapi.

Cara Mengaktifkan dan Setting Robots.txt Kustom di Blogger

Langkah pertama yang perlu kita lakukan adalah mengatur susunan robots.txt kustom. Ikuti langkah-langkah simpel berikut ini:

1. Masuk ke dashboard Blogger kamu.

2. Pilih menu Setelan (Settings) di panel sebelah kiri.

3. Gulir ke bawah sampai kamu menemukan bagian Pemberayapan dan Pengebungan (Crawling and Indexing).

4. Pada pilihan Aktifkan robots.txt kustom, geser tombol ke kanan hingga berwarna hijau/aktif.

5. Klik menu Robots.txt kustom yang berada tepat di bawahnya.

Nah, di dalam kotak kosong yang muncul, silakan salin dan tempel kode standar terbaik di bawah ini:

Plaintext

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Sitemap: https://nama-blog-kamu.blogspot.com/sitemap.xml

Catatan Penting: Jangan lupa untuk mengganti [https://nama-blog-kamu.blogspot.com](https://nama-blog-kamu.blogspot.com) dengan alamat URL asli blog kamu sendiri. Setelah itu, klik Simpan.

Penjelasan Singkat Kode di Atas:

• Mediapartners-Google: Ini adalah robot khusus Google AdSense. Kita mengosongkan bagian Disallow agar AdSense bisa merayapi seluruh isi blog untuk menampilkan iklan yang relevan.

• Disallow: /search: Bagian ini melarang Google mengindeks halaman label atau pencarian blog. Mengapa? Biar blog kamu terhindar dari masalah duplicate content (konten ganda) yang bisa memperburuk nilai SEO.

• Sitemap: Ini adalah peta situs blog kamu agar Google lebih cepat tahu kalau ada artikel baru yang kamu rilis.

Mengenal Istilah dalam Tag Prosedur Header Kustom

Setelah urusan satpam (robots.txt) selesai, sekarang kita atur instruksi yang lebih detail di setiap ruangan, yaitu Tag Prosedur Header Kustom (Custom Robots Header Tags).

Saat membuka menu ini di Blogger, kamu akan melihat banyak sekali pilihan centang seperti all, noindex, nofollow, dan sebagainya. Jangan pusing dulu, ini arti dari istilah-istilah penting tersebut:

• all: Robot bebas merayapi, mengindeks, dan menampilkan halaman tersebut di Google.

• noindex: Melarang Google menampilkan halaman tersebut di hasil pencarian.

• nofollow: Robot boleh membaca halaman tersebut, tapi dilarang mengikuti atau memberi nilai pada link-link yang ada di dalamnya.

• noarchive: Google tidak akan menyimpan versi cache (salinan cadangan) dari halaman tersebut.

• noodp: Melarang mesin pencari menggunakan deskripsi dari direktori DMOZ/ODP (meski sekarang sudah jarang digunakan, fitur ini masih ada).

Settingan Terbaik Tag Header Kustom Blogspot Agar Cepat Index

Sekarang, mari kita terapkan kombinasi terbaiknya. Masih di menu Setelan > Pemberayapan dan Pengebungan, aktifkan opsi Aktifkan tag prosedur header kustom.

Di bawahnya akan muncul tiga bagian utama. Atur centangnya persis seperti panduan di bawah ini:

1. Tag Halaman Beranda (Homepage)

Halaman utama blog adalah gerbang utama yang wajib diindeks dengan sempurna oleh Google.

• Centang: all dan noodp (atau cukup all saja jika pilihan noodp tidak krusial).

• Sisanya biarkan kosong.

2. Tag Halaman Arsip dan Penelusuran

Halaman arsip, label, dan hasil pencarian internal blog sebaiknya tidak muncul di Google untuk menghindari penumpukan halaman sampah yang tidak penting.

• Centang: noindex dan nofollow.

• Artinya: Google tidak akan memajang halaman label kamu di mesin pencari, dan robot tidak akan membuang-buang waktu merayapi link di sana.

3. Tag Default untuk Posting dan Halaman

Ini adalah bagian paling penting, karena ini mengatur artikel utama dan halaman statis (seperti About atau Contact) yang kamu buat.

• Centang: all dan noodp.

• Dengan begini, semua artikel yang kamu tulis dengan susah payah akan langsung diizinkan untuk nangkring di Google.

Jangan lupa untuk klik Simpan setelah mengatur ketiga bagian di atas.

Tips Tambahan: Hindari Kesalahan Fatal Ini!

Banyak blogger pemula yang terlalu bersemangat mencoba-coba menu ini tanpa tahu fungsinya, hingga akhirnya traffic blog mereka mendadak merosot tajam menjadi nol.

Berikut tips aman agar optimasi blog kamu berjalan lancar:

• Jangan Pernah mencentang 'noindex' pada Halaman Beranda atau Posting/Halaman. Jika kamu melakukannya, sama saja kamu menutup total blog kamu agar tidak bisa ditemukan oleh siapapun di internet lewat Google.

• Gunakan Google Search Console. Setelah melakukan settingan di atas, pastikan kamu mendaftarkan blog dan mengirimkan sitemap ke Google Search Console agar proses perayapan berjalan lebih cepat.

Kesimpulan

Melakukan optimasi lewat Panduan Setting Robots.txt dan Tag Prosedur Header Kustom Terbaik di Blogspot adalah langkah awal yang sangat bagus untuk memperkuat fondasi SEO blog kamu. Dengan pengaturan yang tepat, robot Google bisa bekerja lebih efisien, artikel kamu lebih cepat terindeks, dan risiko terkena penalti karena konten duplikat pun bisa dihindari.

Proses indeksasi ini biasanya memakan waktu beberapa hari hingga beberapa minggu tergantung keaktifan blog kamu. Jadi, setelah settingan ini selesai, kamu tinggal fokus konsisten menulis konten yang bermanfaat untuk pembaca.

Selamat mencoba, dan semoga blog kamu makin ramai pengunjung! Kalau ada langkah yang masih membingungkan, jangan ragu untuk membaca ulang pelan-pelan ya. Semangat ngeblog!

Bagikan Artikel ini