[Pascual]

¿De qué forma puedo utilizar .htaccess para aplicar un nombre de cabecera a todos los niveles inferiores de mi directorio?

[Joel7]

Solo debes colocar el signo de / antes de header.html, con esto le estarás diciendo a Apache que busque en la raíz cada vez que se acceda:

HeaderName /header.html