Robot.txt Generator
- Image via Wikipedia
Robot.txt Generator ini digunakan bagi Anda yang malas untuk membuat manual Robot.txt, yang digunakan untuk membatasi akses bot (search engine robot). Akses ini dibatasi dengan memberikan URL halaman mana saja bot tidak dapat memasuki website Anda.
Contoh:
URL: http://www.domainanda.com/index.html
di robot.txt: /index.html
URL: http://www.domainanda.com/blog/private-info.html
di robot.txt: /blog/private-info.html
URL: http://www.domainanda.com/cgi-bin/
di robot.txt: /cgi-bin/
Anda bisa menggunakan tool Robot.txt Generator ini disini.
Belajar SEO | jemmy | March 24, 2009
Common Gateway Interface, generator, Google, HTML, Robot, Robots exclusion standard, Uniform Resource Locator, Web search engine, robot.txt , cara membuat robot.txt, membuat robots.txt, robots.txt, robot.txt generator, cara membuat robot, membuat robot.txt, robots.txt generator, cara buat robot.txt, robot txt, contoh robots.txt, robot generator, cara membuat robot txt, cara membuat robots.txt, contoh robot.txt, membuat robot txt, membuat robot.txt wordpress, buat robot.txt, cara buat robot, cara buat robots.txt, generator, artikel robot, belajar buat robot, buat robots.txt, cara membuat robots txt
Posting Menarik Lainnya:
10 Responses to “Robot.txt Generator”
Pencarian populer: cc generator
Dulu pernah pernah pake generator ini, sekedar buat nyoba2 aja
artikelnya sangat singkat dan padat….
kalau pakai generator berarti secara otomatis isi file robot terisi di root domain kita yaahhh…, atau bagaimana? atau generate dulu di webmaster tools baru kemudian diupload ke file robots txt..
============
salam kenal balik yaahh, terima kasih telah berkunjung ke blog saya, mari ramaikan trafik blog; antara lain dengan blogwalking..
@munawar am: generatornya buat bikin filenya biar gampang aja tanpa harus coding satu-satu per URL, save ke file robot.txt dan upload ke root directory, biasanya sih di folder public_html atau www
kalo wordpress kayaknya dah ostosmastis ya? ato perlu plugin tambahan?
@mrbambang: setau saya nggak ada mas, nggak include robotnya, mesti dibuat dulu trus diupload ke file server hosting mas
robot.txt itufile ya????
jadi pakenya google webmaster?
kalau buat selain google pake juga gak?
atau manual peritanya gimana?
lagi blajar nich
maap mas .. lom ngudeng nich.. robot ini untnuk meningkatkan traffic di blog kita yah.. mohon pencerahannya thanks
@ichuell: bukan mas, nggak ada hubungannya
kalo ndak pake robot, apakah ada pengaruh nya terhadap hasil pencarian gugel? tenggkyu…
@hersu: Kalo nggak pake robots.txt, pake aja tag nofollow atau noindex. Kalo pengaruhnya sih tergantung webmaster sendiri ya, mo diindex apa nggak halaman2 tersebut, gugel mah ngikut aja aturan robos.txt atau meta tag.