Robots nur zu bestimmten Zeiten?

[Blaubart]

Tach.

ist es irgendwie möglich, dass man Robots mitteilt, dass sie nur zu bestimmten Zeiten crawlen dürfen?

Vorgeschlagen wurde eine solche Erweiterung bereits. Ob irgendein Crawler diese oder ähnliche Anweisungen interpretiert, weiß ich allerdings nicht.