Andre: Googlebot

Beitrag lesen

Hi bernd,

möglich wäre das schon - ich bin aber kein Fachmann auf diesem Gebiet. Also ich lese diesen Text so:
Der Googlebot soll kein Zugriff auf die Verzeichnisse /test2/ sowie /bilder/ erhalten?! (alle anderen Bots dürfen das Verzeichnis also lesen?!) und anschliessend verbietest du dann allen Bots (*) überhaupt irgend ein Verzeichnis lesen zu dürfen (also auch dem Googlebot?!).

meine robts.txt:
User-agent: Googlebot
Disallow: /test2/
Disallow: /bilder/

User-agent: *
Disallow: /

Ich würde es so versuchen:

User-agent: *
Disallow: /test2/
Disallow: /bilder/

User-agent: Googlebot
Allow: /
Disallow: /test2/
Disallow: /bilder/

hier noch ein hilfreicher link:
    http://selfhtml.teamone.de/diverses/robots.htm#allgemeines

Grüße - Andre