das ist aber eine auf HTML-Dokumente beschränkte Sicht. Was ist mit anderen Ressourcen? PDF, Audio, Video, Software-Downloads? Wie sollen Webmaster in diese Dateien ein noindex-Meta-Tag einbauen?
Mit dem X-Robots-Tag-HTTP-Header.
das ist aber eine auf HTML-Dokumente beschränkte Sicht. Was ist mit anderen Ressourcen? PDF, Audio, Video, Software-Downloads? Wie sollen Webmaster in diese Dateien ein noindex-Meta-Tag einbauen?
Mit dem X-Robots-Tag-HTTP-Header.