hi,
Wie mus eine Robot.txt aussehen wenn alle Suchmaschinen zugelassen werden sollen. Und - nur textdateien nicht indexiert werden sollen!
schau mal, ob dir hier weitergeholfen werden kann: http://www.robotstxt.org/wc/robots.html
gruss,
wahsaga
nicht angemeldet