Header und Footer ohne php umsetzen

[Alphadex]

Hallo,
Ich wollte auf meiner HP nun einen einheitlichen header und einen einheitlichen footer erstellen der dann an jede Seite oben, bzw. unten drangehängt wird.
Das ganze hatte ich auch schnell mit
<?php include("header.html"); ?>
hinbekommen. Das Problem ist nun, dass mein Anbieter kein php unterstützt. Ist es möglich das genauso mit html hinzubekommen? Frames sollten es allerdings nicht sein, header und footer sollten schon jedesmal neu geladen werden.