Anita: Seiten per .htaccess für den Googlebot sperren

Beitrag lesen

Aber alle Anderen, außer Google, dürfen die Bilder sehen? Es sollte ja, lt. OP, nur Google ausgesperrt werden.

Mit Google und Bing decke ich den größten Teil aller Suchmaschinenanfragen ab. Bing hat nur zwei Bots, das ließ sich recht schnell herausfinden:

msnbot/2.0b (+http://search.msn.com/msnbot.htm)
msnbot/1.1 (+http://search.msn.com/msnbot.htm)

Die würde ich also selbstständig in meine .htaccess einbauen, deshalb hatte ich nicht extra nach Bing, sondern explizit nach Google gefragt. :)

Generell ist mir klar, dass meine bei Bing/Google gesperrten Inhalte möglicherweise in der ein oder anderen Nischen-Suchmaschine auftauchen. Das ist aber in Ordnung und wenn ich es nicht wollte, dürfte ich den Inhalt nicht veröffentlichen.

Liebe Grüße
Anita