wahsaga: Probleme beim Eintrag in Google

Beitrag lesen

hi,

Das ist mir neu, denn laut Logfile auf meinem Webspace fragt der Googlebot die robots.txt ab und hält sich dann auch daran, indem er die (per disallow gesperrten) Unterverzeichnisse ignoriert.

warum lässt du die hälfte von thomas' aussage unter den tisch fallen?

er hat lediglich gesagt, dass google die robots.txt ignoriert, wenn in den meta tags widersprechende angaben enthalten sind - dann beachtet google letztere, obwohl eigentlich die angaben in der robots.txt stärkeres gewicht haben sollten.

gruss,
wahsaga