Cara Mengatasi Url Yang Dicekal Robot.Txt

Cara Mengatasi URL yang Dicekal Robot.txt , yang biasa nulis blog niscaya udah kenal sama robot dot txt, tapi kadang juga ada yang gak ngeh, sama kaya si katro juga awalnya gitu. tapi pernah gak sih ngalamin kan url yang dicekal robot.txt nah untuk mengetahui URL yang Dicekal oleh Robot.txt di blog anda?, 

Kalau emang tadinya buat blogger si robot satu ini dapat bikin nambah search engine lebih cepat,  tapi malah kini kena sebaliknya, walau jarang yang kena sih. Buat yang ngalamin gak usah panik nih sebab cara mengatasinya sudah ada kok.

Silahkan masuk ke Webmaster tools Google untuk mengetahuinya, Kemudian pilih blog anda yang ingin anda lihat url yang di cekal, lalu pilih perayapan > Url yang dicekal. Lihat berapa banyak url yang dicekal di blog anda. Kalau belum mendaftar ke webmaster tidak akan tertangkap lembap berapa jumlah url yang dicekal tersebut.

Cara mengatasinya kita tinggal merubah instruksi robot.txt Disallow: /search menjadi Disallow: saja. Berikut ini cara mengatasi url yang dicekal atau setidaknya menguranginya.

1. Masuk Dashboard > Setelan > Preferensi Penelusuran
2. Pada Perayap dan pengindeksan pliih edit di hidangan robots.txt khusus
3. Aktifkan konten robots.txt khusus? jawab "Ya"
4. Isikan instruksi ini:

User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow:
Allow: /
Sitemap: http://sugenghandoyo.blogspot.co.id//feeds/post/default?orderby=UPDATED

Jangan lupa ganti URL Blog nya yang berwarna merah dengan URL Blog sahabat :)

 

4. Simpan perubahan. dan,
5. Selesai.
6. Tunggu beberapa hari untuk melihat hasilnya.

Sekian tutorial Cara Mengatasi URL yang Dicekal Robot.txt semoga dengan adanya tutorial ini URL blog sahabat katro udah gak dicekal lagi, supaya bermanfaat yah tro ;)

#repost
sumber

Sumber http://sugenghandoyo.blogspot.com

Share this post