Cara Mengatasi Url dicekal Robot.txt


Biasanya url yang dicekal semakin banyak atau berkurang itu terkadang karena settingan robot txt dan robot tag header di blog sobat. Disini akan dibahas Cara mengatasi url di cekal robot txt.

Bagaimana cara mengetahui  berapa banyak url dicekal di blog anda?, Silahkan masuk ke login ke Webmaster tools Google untuk mengetahuinya, Kemudian pilih blog sobat yang ingin dilihat url yang di cekal, kemudian masuk ke perayapan > Url yang dicekal. Setelah itu lihat berapa banyak url yang dicekal di blog sobat. Pastikan sebelumnya telah mendaftarkan website/blog sobat ke google webmaster, jika belum harap segera daftar

Cara mengatasinya kita tinggal merubah kode robot.txt Disallow: /search menjadi Disallow: saja. Berikut ini cara mengatasi url yang dicekal / setidaknya menguranginya.
  • Masuk dashboard -> setelan -> preferensi penelusuran
  • Pada Perayap dan pengindeksan pliih edit di menu robots.txt khusus
  • Aktifkan konten robots.txt khusus? jawab "Ya"
  • Isikan kode ini :
User-agent: Mediapartners-GoogleDisallow:User-agent: *Disallow:Allow: /Sitemap:http://graciejohnsphotography.blogspot.com//feeds/post/default?orderby=UPDATED 



Keterangan:
Silahkan ganti kode yang berwarna merah dengan url blogmu.
  • Simpan perubahan.
  • Done.

0 Response to "Cara Mengatasi Url dicekal Robot.txt"

Post a Comment