JürgenB: robots.txt wird von Google ignoriert

Beitrag lesen

Hallo dave,

Ich bin mir relativ sicher dass er das noch immer macht. Immerhin kommt auch in der Adressleiste eine Vorschlagliste.

ich glaube, dass Google die URLs, die eingetippt werden, nicht mehr in den Suchindex übernimmt. Es gab da wohl Proteste von Web-Autoren, da deren Testseiten in den Suchergebnissen auftauchten, obwohl sie nirgens verlinkt waren.

Gruß, Jürgen

PS Ich habe das seinerzeit nicht weiter verfolgt, daher kann ich hier auch keine Quellen angeben.