Hallo!
Ich habe mich bei SelfHTML im Archiv kundig gemacht wie eine Robot.txt ausschauen sollte! Leider verstehe ich so einiges nicht!
Frage:
Wie mus eine Robot.txt aussehen wenn alle Suchmaschinen zugelassen werden sollen. Und - nur textdateien nicht indexiert werden sollen!
Gruss
Dirk