Robot.txt Generator

ASIMO is physically anthropomorphic.
Image via Wikipedia

Robot.txt Generator ini digunakan bagi Anda yang malas untuk membuat manual Robot.txt, yang digunakan untuk membatasi akses bot (search engine robot). Akses ini dibatasi dengan memberikan URL halaman mana saja bot tidak dapat memasuki website Anda.

Contoh:

URL: http://www.domainanda.com/index.html
di robot.txt: /index.html

URL: http://www.domainanda.com/blog/private-info.html
di robot.txt: /blog/private-info.html

URL: http://www.domainanda.com/cgi-bin/
di robot.txt: /cgi-bin/

Robot.txt Generator
Anda bisa menggunakan tool Robot.txt Generator ini disini.