Hallo
Allerdings schadet er nicht und es wird allgemein empfohlen ihn zu benutzen.
dieser Allgemeinheit kann ich mich nicht anschließen, denn eine kleine Datei namens robots.txt macht diesen meta-tag komplett überflüssig.
Da die Suchmaschinenroboter verschiedener Anbieter auf verschiedene Informationen zurückgreifen (robots.txt ODER Metatag, vielleicht auch robots.txt UND Metatag, wer weiß), kann das Metatag durchaus relevant sein. Deshalb kann ich mich deiner Allgemeinheit nicht anschließen. ;-)
Tschö, Auge