-->

Ad Unit (Iklan) BIG

Cara Mudah Mengatasi Peringatan Diindeks Meski Diblokir Oleh Robots. txt

Post a Comment

Cara Mudah Mengatasi Peringatan Diindeks Meski Diblokir Oleh Robots. txt

Seringkali ketika pertama kali membuat sebuah blog atau ketika baru berganti template kita mendapatkan email notifikasi yang berbunyi "Diindeks, meski diblokir oleh robots.txt". Peringatan tersebut biasanya juga muncul di dashborad google search console.

Mengutip penjelasan yang di sampaikan oleh seorang master blogger Indonesia Mas Sugeng, peringatan tersebut muncul karena mesin pencari google ternyata sudah mengabaikan perintah noindex menggunakan file robot.txt yang ada pada template blog kita. Seperti kita ketahui bahwa pada template blogger hingga saat ini masih menggunakan file robot.txt tersebut untuk mencegah agar halaman tertentu pada blog kita tidak di index oleh mesin pencari tersebut.

Contoh halaman tersebut misalnya adalah halaman pencarian dan halaman label.

Pada File robots.txt default blogger tertulis perintah sebagai berikut:

User-agent: Mediapartners-Google
 Disallow: User-agent: *
Disallow: /search
Allow: /

 Sitemap: https://blog-anda.blogspot.com/sitemap.xml

Arti dari perintah di atas adalah:
  • User-agent: Mediapartners-Google (Menandakan bahwasannya blog Anda menggunakan adsense)
  • Disallow: (Yang tidak diperbolehkan tidak ada)
  • User-agent: * (Semua robot mesin pencari, artinya bukan hanya google saja)
  • Disallow: /search (Tidak mengizinkan URL setelah "/search" misalnya "/search/label" dan "/search/search?update..)
  • Allow: / (yang di izinkan untuk dirayapi, tanda "/" merupakan nama blog)
  • Sitemap: https://blog-anda.blogspot.com/sitemap.xml (Sitemap blog Anda)
Secara harfiah bisa di arikan bahwa fungsi dari perintah tersebut adalah untuk memberitahukan kepada mesin pencari google supaya tidak mengindex URL yang diawali dengan tanda "/search " setelah alamat blog.
Seperti kita ketahui bahwa  URL yang diawali dengan tanda "/search" di blogger digunakan sebagai halaman label dan juga halaman pencarian.

a. Contoh halaman label misalnya adalah : https://www.farmcultivation.xyz/search/label/Corn Cultivation
b. Sedangkan contoh URL halaman pencarian misalnya : https://www.farmcultivation.xyz/search?q=corn+cultifation

Jika Anda mendapatkan notifikasi seperti di atas tidak perlu khawatir, karena hal tersebut sangat mudah di atasi. 

Berikut ini adalah Cara Mudah Mengatasi Peringatan Diindeks Meski Diblokir Oleh Robots. txt, sebagai berikut:

PERTAMA

Cara yang paling gampang dan mudah untuk mengatasi permasalahan tersebut  adalah dengan cara menghapus perintah "Disallow: /search" pada file robots.txt dengan menggunakan fitur custom robots.txt di dashboard blogger.

Dengan menggunakan cara ini memang kita berhasil untuk menghilangkan notifikasi atau peringatan "diindeks meski diblokir oleh robots.txt" yang ada di dashboard google search console. Akan tetapi efeknya adalah halaman label dan halaman pencarian tetap akan muncul dan terindex oleh mesin pencari sehingga masih muncul di halaman pencarian google.

Kebanyakan kita tidak menginginkan halaman label dan halaman pencarian tersebut tidak muncul di hasil pencarian karena kedua halaman tersebut berkualitas rendah, walaupun sebenarnya juga tidak apa - apa kalau di biarkan muncul.

KEDUA

Cara kedua yang bisa di gunakan adalah dengan menggunakan tag meta robot untuk memberitahukan kepada mesin pencari google agar tidak mengindex halaman label dan pencarian tersebut. Google sendiri saat ini masih mendukung penggunaan tag meta robot, artinya penggunaan tag meta robot ini tidak diabaikan seperti halnya file robots.txt di atas.

Bagaimana cara memasang tag meta robot tersebut pada blogger?

Untuk memasang tag meta robot ini bisa dilakukan dengan cara otomatis yaitu dengan memanfaatkan fitur "Tag tajuk robot khusus" yang ada pada dashboard  blogger.

Perhatikan gambar berikut ini:

Cara Mudah Mengatasi Peringatan Diindeks Meski Diblokir Oleh Robots. txt

Dengan pengaturan seperti itu biasanya akan berhasil, namun belakangan ini cara tersebut sudah tidak efektif lagi sehingga kita harus menggunakan cara yang lain.

Caranya adalah dengan menambahkan script di bawah ini kedalam menu edit HTML blog Anda tepat di bawah kode <head>.

<!-- Meta Robot -->
<b:if cond="data:view.isSearch or data:view.isArchive"> <meta content='noindex, noarchive' name='robots'/> </b:if>

Maka akan terlihat seperti gambar dibawah ini:

Cara Mudah Mengatasi Peringatan Diindeks Meski Diblokir Oleh Robots. txt

Jika Anda sudah melakukan perubahan seperti diatas , maka selanjutnya adalah melakukan “Validasi Perbaikan” di dashboard Google Search Console Anda. Setelah itu tunggu sampai notifikasi “Diindeks meski diblokir oleh robots.txt” hilang. Prosesnya akan memakan waktu beberapa hari sampai mesin pencari merayapi blog Anda kembali. Nantinya jika perbaikan yang di lakukan berhasil maka akan ada email yang di kirmkan kepada kita.

Cara Mudah Mengatasi Peringatan Diindeks Meski Diblokir Oleh Robots. txt

Demikianlah Cara Mudah Mengatasi Peringatan Diindeks Meski Diblokir Oleh Robots. txt, semoga bermanfaat untuk Anda.

Sebagai informasi tambahan untuk Anda pengguna template LinkMagz dari Mas Sugeng bisa menuju ke link Tautan artikel Mas Sugeng untuk mengetahui bagaimana cara mengatasi permasalah tersebut.

referensi : https:www.sugeng.id/

Related Posts

Post a Comment

Subscribe To Our Newsletter