Tips Optimazi untuk ROBOT.TXT oleh prologic :
Kali ini
prologic ngasih tips/ cara-cara untuk para bloger biar halaman terindex oleh search engine seperti google, MSN dll. Tips sederhana namun sangat penting bagi anda yang menggeluti dunia publisher. Sebelumnya pastikan blog anda sudah terdaftar di webmaster, bagi yang belum terdaftar bisa klik
link ini.
Berikut ini contoh/ tips tentang cara menggunakan robots.txt login ke blogspot ►►► akunku ►►►
webmaster tools ►►►di halaman
HOME, jika web/ blog anda sudah terdaftar, anda akan melihat url blog anda kemudian klik urlnya.
lanjutkan ke cara/ tips berikutnya, yakni klik ►►►
site configuration [sebelah kiri atas]--->
Crawler access, edit texbox nya dengan memasukan sitemap blog/ website pada edit box robot.txt. Berikut beberapa contoh dan fungsi pengaturan robot.txt
Cara-cara memasukan sitemap website anda di kotak robot.txt seperti berikut :
1. Contoh robot.txt yang mengijinkan penelusuran seluruh file di server kita oleh seluruh bot/ kode yang di miliki search enggine untuk mencari data.
User-agent: *
Disallow:/cgi-bin/
Disallow: /tmp/Disallow: /~prologic/
2. Contoh robot.txt mengijinkan diakses oleh BadBot saja.
User-agent: BadBot
Disallow: /
3. Contoh robot.txt yang mengijinkan diakses oleh Bot google.
User-agent: Google
Disallow:
User-agent: *
Disallow: /
4. Contoh robot.txt tidak mengijinkan diakses seluruh filenya oleh Bot.
User-agent: *
Disallow: /~prologic/stuff/
5. Contoh robot.txt tidak mengijinkan diakses pada file tertentu oleh Bot.
User-agent: *
Disallow: /~prologic/junk.html
Disallow: /~prologic/foo.html
Disallow: /~prologic/bar.html
Setelah kita mengetahui cara menggunakan robots.txt kita atur file apa saja dan bot apa saja yang bisa mengakses file-file pada website kita. kemudian simpan file tersebut dengan nama robot.txt [untuk yang pke hosting sendiri/ wordpress], kemudian letakkan file tersebut di , contoh "http://www.bloganda.blogspot.com/robots.txt".
sekarang kita belajar mengartikan kode-kode tersebut :
- User-agent: * ►►►tanda ( * ) = mengijinkan seluruh bot
- User-agent: BadBot ►►► = hanya bot yang bernama BadBot yang boleh mengakses
- Disallow: / ►►► = mengijinkan seluruh file kita dibaca oleh bot
- Disallow: /~prologic/junk.html ►►► = tidak memperbolehkan bot mengakses file ~prologic/junk.html
Dari coding tersebut kita bisa mengatur file apa saja yang boleh diakses dan di index search engine.
Dibawah ini cara test untuk robot.txt , caranya anda
klik url blog anda untuk mengetes robot.txt.
Berikut adalah hasil robot.txt yang telah berjalan dengan baik :
Demikian untuk Tips Optimazi untuk ROBOT.TXT oleh
prologic
Posts
