cfrosch: Tool zu Simulation eines Crawlers

Hallo,

kennt jemand ein Tool, das einen Crawler simulieren kann, also z.B. ein Browser, dessen Browser-ID auf einen typischen Crawler-Eintrag gesetzt werden kann?

Grüße, cfrosch

  1. Hallo,

    kennt jemand ein Tool, das einen Crawler simulieren kann, also z.B. ein Browser, dessen Browser-ID auf einen typischen Crawler-Eintrag gesetzt werden kann?

    Zum Beispiel Firefox mit installierten Addon "UserAgent Switcher"?

    Gruß,
    Philipp

    1. Super, danke!