Robots.txt so korrekt?
André
- sonstiges
Hallo,
ich habe mal eine Frage an euch - sind diese Angaben in einer Robots.txt korrekt?
User-agent: *
Disallow: /
Allow: /PTB/
Allow: /ankh-gewinnspiel.php
Allow: /archiv.php
Allow: /game.php
Allow: /impressum.php
User-Agent: Googlebot-Image
Disallow:
Disallow: /admin/
Disallow: /elemente/
Gruß,
André
Hallo André!
ich habe mal eine Frage an euch - sind diese Angaben in einer Robots.txt korrekt?
teilweise ;-)
User-agent: *
Disallow: /
damit sperrst du alle aus...
Allow: /PTB/
Allow: /ankh-gewinnspiel.php
Allow: /archiv.php
Allow: /game.php
Allow: /impressum.php
...und da es kein "Allow" in der Syntax von robots.txt gibt, bleibt's auch dabei.
mfg Alfie
Tach alle!
Hallo André!
ich habe mal eine Frage an euch - sind diese Angaben in einer Robots.txt korrekt?
teilweise ;-)
User-agent: *
Disallow: /
damit sperrst du alle aus...Allow: /PTB/
Allow: /ankh-gewinnspiel.php
Allow: /archiv.php
Allow: /game.php
Allow: /impressum.php...und da es kein "Allow" in der Syntax von robots.txt gibt, bleibt's auch dabei.
Das ist die Halbe Warheit.
http://www.bjoernsworld.de/suchmaschinen/robots-txt.html#beispieltabelle . Dort sieht man, dass es DOCH noch Allow gibt.
mfg Alfie
Hallo!
...und da es kein "Allow" in der Syntax von robots.txt gibt, bleibt's auch dabei.
Das ist die Halbe Warheit.
http://www.bjoernsworld.de/suchmaschinen/robots-txt.html#beispieltabelle . Dort sieht man, dass es DOCH noch Allow gibt.
Du hast auch folgendes gelesen?
...Da die Allow Anweisung aber erst später als der eigentliche Standard eingeführt wurde, wird sie noch nicht von allen Robots unterstützt. Von daher sollte man sich nicht darauf verlassen und lieber nur Disallow benutzen.
mfg Alfie