Marc Reichelt: Spiders und Bots blockieren

Beitrag lesen

Hallo Enrico,

in irgendeiner Zeitschrift hatte ich mal ein Codebeispiel gesehen, wie man Spider in eine Falle locken kann.
Die ordentlichen Spider lesen nämlich die robots.txt aus und befolgen die Anweisungen dort, d.h. man kann dort angeben dass kein Spider auf eine bestimmte PHP-Seite gehen darf.
Und diese bestimmte PHP-Seite (die irgendwo auf deiner Seite durch einen nicht sichtbaren Link verlinkt wird) erzeugt 10 weitere Links auf "sich selbst", mit unterschiedlichen Variablen angehängt. Ein so "gefangener" Spider bleibt so lange in dieser Falle, bis er abgebrochen wird.
Durch eine Verzögerungszeit (z.B. 20 Sekunden) kann man noch zusätzlich dafür sorgen, dass der entstehende Traffic nicht so hoch ist.

Vielleicht ist das eine nicht ganz elegante Methode, aber wenn sie funktioniert... ;-)

Bis dann!

Marc Reichelt || http://www.marcreichelt.de/

--
Linux is like a wigwam - no windows, no gates and an Apache inside!
SELFCode: ie:{ fl:| br:> va:} ls:< fo:} rl:( n4:( ss:) de:> js:| ch:? sh:| mo:) zu:)
http://emmanuel.dammerer.at/selfcode.html