Blogger yang mengoptimasi blog menjadi SEO friendly sudah mulai mengatur robot.txt khusus dan tag header khusus. Dengan mengatur robot.txt khusus dan tag header khusus bot search engine akan dengan mudah mengetahui hal-hal yang kita inginkan untuk dirayapi maupun tidak dirayapi. Bagi blogger pemula yang belum tahu Cara Setting Robot.txt Khusus dan Tag Header Robot Khusus akan saya rangkum dalam artikel berikut.
Tutorial yang saya berikan pada artikel Cara Setting Robot.txt Khusus dan Tag Header Robot Khusus cukup mudah untuk anda lakukan. Tapi diharapkan anda dapat mengikuti langkah-langkahnya dengan benar. Karena sedikit saja kesalahan pada saat mengatur robot.txt khusus dan tag header khusus, bot search engine tidak akan merayapi blog anda.
Robots.txt Khusus
Robots.txt khusus adalah perintah yang akan berfungsi untuk membatasi dan mengontrol bot search engine dalam mengindex dan merayapi artikel blog. Robots.txt Khusus memiliki dua kode utama dalam menjalankan perintah sebagai berikut.
Kode utama yang digunakan dalam robot.txt khusus adalah ALLOW dan DISALLOWPerintah umum yang digunakan pada robot.txt khusus
► ALLOW berfungsi sebagai akses robot.txt untuk melakukan index atau perayapan pada artikel blog.
► DISALLOW berfungsi sebagai akses robot.txt untuk tidak melakukan index atau perayapan pada artikel blog.
User-agent: Mediapartners-GoogleCara Setting Robots.txt Khusus
Disallow:
User-agent: *
Disallow:
Disallow: /Search
Sitemap: http://www.theamazingjoker.blogspot.com/feeds/posts/default?orderby=UPDATED
1. Login ke akun blogger anda.
2. Pergi ke Setelan ► Preferensi Penelusuran.
3. Pada Perayap dan Pengindeksan pilih Robots.txt Khusus ► Edit ► Ya.
4. Setting perintah robots.txt khusus anda seperti berikut. Robot.txt yang saya berikan adalah rekomendasi langsung dari saya. Karena saya juga menggunakan robot.txt tersebut. Atau anda bisa menggunakan perintah umum yang telah digunakan oleh sebagaian besar blogger.
User-agent: Mediapartners-GooglePenjelasan Kode-kode Diatas
Disallow:
User-agent: Googlebot
Disallow: /search
Disallow: /?m=1
Disallow: /?m=0
Disallow: /*?m=1
Disallow: /*?m=0
Disallow: /*?showComment=
Allow: /
User-agent: *
Disallow: /search
Allow: /
Sitemap : http://www.theamazingjoker.blogspot.com/feeds/posts/default?orderby=UPDATED
Jika anda masih bingung tentang perintah robot.txt yang saya berikan, berikut Penjelasan Kode-kode Diatas untuk mempermudah pemahaman anda terhadap perintah robot.txt.
- User-agent: Mediapartners-Google Robot Google Adsense merayapi blog
- Disallow: Yang tidak diperbolehkan tidak ada
- User-agent: Googlebot Robot Google merayapi blog
- Disallow: /search Tidak diperbolehkan merayapi folder search dan seterusnya, seperti URL/search/label atau URL/search/search?updated dan sebagainya.
- Disallow: /?m=1 Tidak diperbolehkan merayapi tampilan homepage pada mobile
- Disallow: /?m=0 Tidak diperbolehkan merayapi tampilan homepage pada smartphone atau tablet.
- Disallow: /*?m=1 Tidak diperbolehkan merayapi tampilan postpage pada mobile.
- Disallow: /*?m=0 Tidak diperbolehkan merayapi tampilan postpage pada smartphone atau tablet.
- Disallow: /*?showComment= Tidak diperbolehkan merayapi link komentar
- User-agent: * Semua robot Search Engine / mesin pencari
- Allow: / Mengizinkan semua halaman untuk dirayapi, kecuali yang tertulis pada Disallow di atas.
- Tanda (/) kurang lebih artinya nama blog.
- Sitemap: http://www.theamazingjoker.blogspot.com/feeds/posts/default?orderby=UPDATED sitemap atau alamat feed blog kita. Ganti tulisan berwarna biru di atas dengan alamat blog anda.
5. Klik "SIMPAN PERUBAHAN" setelah anda memasang perintah robot.txt tersebut.
Cara Setting Tag Header Robot Khusus
Selain robot.txt, anda juga harus mengaktifkan tag header robot khusus. Seperti sebelumnya, Cara Setting Tag Header Robot Khusus dapat berakibat sangat buruk apabila salah mengaturnya. Tutorial mengaturnya sebagai berikut :
1. Login ke akun blogger anda.
2. Pergi ke Setelan ► Preferensi Penelusuran.
3. Pada Perayap dan Pengindeksan pilih Tag Tajuk Robot Khusus ► Edit ► Ya.
4. Setting tag header robot khusus anda sebagai berikut. Tag header robot khusus yang saya berikan adalah rekomendasi langsung dari saya. Karena saya juga menggunakan tag header robot khusus tersebut.
5. Klik "SIMPAN PERUBAHAN" setelah anda selesai centang semua kolom seperti gambar yang telah saya berikan.
Setelah anda mengaktifkan robot.txt khusus dan tag header robot khusus (Tag Tajuk Robot Khusus), akan muncul tulisan [Diaktifkan] yang menandakan bahwa robot.txt khusus dan tag header robot khusus pada blog anda sudah aktif dan sedang menunggu bot search engine untuk mulai merayapi blog anda.
Semoga Bermanfaat ^_^
2. Pergi ke Setelan ► Preferensi Penelusuran.
3. Pada Perayap dan Pengindeksan pilih Tag Tajuk Robot Khusus ► Edit ► Ya.
4. Setting tag header robot khusus anda sebagai berikut. Tag header robot khusus yang saya berikan adalah rekomendasi langsung dari saya. Karena saya juga menggunakan tag header robot khusus tersebut.
Setelah anda mengaktifkan robot.txt khusus dan tag header robot khusus (Tag Tajuk Robot Khusus), akan muncul tulisan [Diaktifkan] yang menandakan bahwa robot.txt khusus dan tag header robot khusus pada blog anda sudah aktif dan sedang menunggu bot search engine untuk mulai merayapi blog anda.
Semoga Bermanfaat ^_^
Terima Kasih Telah Berkunjung Di Blog The Amazing Joker
Dilarang Mengcopy-Paste seluruh atau sebagian artikel di atas dalam bentuk apapun. Hak cipta sepenuhnya dipegang oleh The Amazing Joker dan dilindungi oleh Digital Millennium Copyright Act (DMCA). Tindakan Copy-Paste bisa secara otomatis membuat blog/website Anda TERHAPUS DARI INDEX GOOGLE.
0 komentar:
Posting Komentar