Neues von STRATO: Sämtliche Spider/Crawler werden ausgesperrt

[Orlando]

Hi ihr beiden,

Jepp. Aber wenn da noindex steht wird die Domain garnicht in bei den Suchmaschinen hinzugefügt. Der Crawler bricht vorher ab.

das stimmt nicht so ganz. Die Meta-Angabe "robots" wirkt immer nur auf der aktuellen Seite. In diesem Fall ist das die Seite mit dem Frameset. Welchen Sinn hätte es auch, diese Seite indizieren zu lassen?

<meta http-equiv="ROBOTS" content="NOINDEX,FOLLOW">

|       |
                                         |     Links verfolgen
                                         |
                              Frameset nicht indizieren

» <a href="http://www.domain.de/">...</a>

Dieser Link wird demnach verfolgt, die dort befindliche Seite (je nach Erlaubnis) indiziert. So einfach ist das - keine Frechheit, sondern absolut korrekt. Also keine Panik >;)

LG Orlando

--
SELF-TREFFEN 2002
http://www.rtbg.de/selftreffen/
http://www.megpalffy.org/temp/penneninhh.html