Robot.txt - wie?

[Dirk]

Hallo!

Ich habe mich bei SelfHTML im Archiv kundig gemacht wie eine Robot.txt ausschauen sollte! Leider verstehe ich so einiges nicht!

Frage:

Wie mus eine Robot.txt aussehen wenn alle Suchmaschinen zugelassen werden sollen. Und - nur textdateien nicht indexiert werden sollen!

Gruss

Dirk

[wahsaga]

hi,

Wie mus eine Robot.txt aussehen wenn alle Suchmaschinen zugelassen werden sollen. Und - nur textdateien nicht indexiert werden sollen!

schau mal, ob dir hier weitergeholfen werden kann: http://www.robotstxt.org/wc/robots.html

gruss,
wahsaga

[ulli]

Hallo!

hallo

Ich habe mich bei SelfHTML im Archiv kundig gemacht wie eine Robot.txt ausschauen sollte![1] Leider verstehe ich so einiges nicht!

das macht ja nichts aber warum fragst du dann dinge die du angeblich schon verstanden hast?[1]

Frage:

Wie mus eine Robot.txt aussehen wenn alle Suchmaschinen zugelassen werden sollen.[1]
Und - nur textdateien nicht indexiert werden sollen!

... da musst du glaube ich alle text-dateien in ein verzeichnis packen und dieses dann mit Disallow: pfad/zu/deinen/txtdateien
sperren ... steht übrigens auch unter [1] :-)

Gruss
Dirk

cu
ulli