Om nah hoo pez nyeetz, Guma!
Hallo zusammen, ich habe eine robots.txt, welche ich auf meiner Webseite anwende. In dieser robots.txt will ich vor allem, dass der Googlebot-Image keine Bilder in der Google-Suche listet. Leider wird die robots.txt nicht beachtet. Diese wurde vor 4 Monaten reingestellt. Was mache ich falsch. Guma
Die Datei robots.txt enthält folgendes:
User-agent: *
Disallow: /admin/
Disallow: /js/
Disallow: /images/
Disallow: /download/User-agent: Googlebot-Image
Disallow: /
Auf den ersten Blick sieht es richtig aus. Der Googlebot-Image, dürfte auch an das Bildverzeichnis nicht rankommen, denn er fällt ja unter *. Wenn es sich um Bilder handelt, die nicht im Ordner /images/ liegen, hat der Bot vielleicht noch einen zweiten Namen, wenn googlebot-image in den Logdateien auftaucht, liegt es an der Datei, imo muss es eine ANSI-Datei sein, darf kein BOM enthalten.
Matthias
1/z ist kein Blatt Papier.
