Suche Hilfe in Bezug auf robots.txt

[Björn Höhrmann]

kann mich irgendjemand über die Datei robots.txt aufklären.

Wozu brauch ich sie, was macht sie und wie erzeuge ich sie ???

http://www.bjoernsworld.de/suchmaschinen/robots-txt