Tips Optimazi untuk ROBOT.TXT

Tips Optimazi untuk ROBOT.TXT oleh prologic :
Kali ini prologic ngasih tips/ cara-cara untuk para bloger biar halaman terindex oleh search engine seperti google, MSN dll. Tips sederhana namun sangat penting bagi anda yang menggeluti dunia publisher. Sebelumnya pastikan blog anda sudah terdaftar di webmaster, bagi yang belum terdaftar bisa klik link ini.

Berikut ini contoh/ tips tentang cara menggunakan robots.txt  login ke blogspot ►►► akunku ►►►webmaster tools  ►►►di halaman HOME, jika web/ blog anda sudah terdaftar, anda akan melihat url blog anda kemudian klik urlnya.

lanjutkan ke cara/ tips berikutnya, yakni klik  ►►►site configuration [sebelah kiri atas]--->Crawler access, edit texbox nya dengan memasukan sitemap blog/ website pada edit box robot.txt. Berikut beberapa contoh dan fungsi pengaturan robot.txt

Cara-cara memasukan sitemap website anda di kotak robot.txt seperti berikut :



1. Contoh robot.txt yang mengijinkan penelusuran seluruh file di server kita oleh seluruh bot/ kode yang di miliki search enggine untuk mencari data.
     User-agent: *
     Disallow:/cgi-bin/
     Disallow: /tmp/Disallow: /~prologic/

2. Contoh robot.txt mengijinkan diakses oleh BadBot saja.
       User-agent: BadBot
        Disallow: /

3. Contoh robot.txt yang mengijinkan diakses oleh Bot google.
       User-agent: Google
        Disallow:

      User-agent: *
       Disallow: /

4. Contoh robot.txt tidak mengijinkan diakses seluruh filenya oleh Bot.
           User-agent: *
           Disallow: /~prologic/stuff/

5. Contoh robot.txt tidak mengijinkan diakses pada file tertentu oleh Bot.
         User-agent: *
         Disallow: /~prologic/junk.html
         Disallow: /~prologic/foo.html
         Disallow: /~prologic/bar.html

Setelah kita mengetahui cara menggunakan robots.txt kita atur file apa saja dan bot apa saja yang bisa mengakses file-file pada website kita. kemudian simpan file tersebut dengan nama robot.txt [untuk yang pke hosting sendiri/ wordpress], kemudian letakkan file tersebut di , contoh "http://www.bloganda.blogspot.com/robots.txt".

sekarang kita belajar mengartikan kode-kode tersebut :

- User-agent: * ►►►tanda ( * ) = mengijinkan seluruh bot
- User-agent: BadBot ►►► = hanya bot yang bernama BadBot yang boleh mengakses
- Disallow: /  ►►► = mengijinkan seluruh file kita dibaca oleh bot
- Disallow: /~prologic/junk.html ►►► = tidak memperbolehkan bot mengakses file ~prologic/junk.html

Dari coding tersebut kita bisa mengatur file apa saja yang boleh diakses dan di index search engine.
Dibawah ini cara test untuk robot.txt , caranya anda klik url blog anda untuk mengetes robot.txt.


 


Berikut  adalah hasil robot.txt yang telah berjalan dengan baik :

Demikian untuk Tips Optimazi untuk ROBOT.TXT oleh prologic

0 komentar:

Post a Comment