Sustituto de frames?

La cuestión es que estoy haciendo una página web, donde quiero mantener los menús laterales fijos, y la zona central que sea la que varíe con cada enlace. Pero pretendo hacer esto de modo que cuando yo quiera modificar algo en los menús no tenga que hacerlo en todas las páginas que he creado.
Ya sé que eso se puede hacer con marcos, pero yo el programa que estoy usando y que más o menos conozco es el nvu. ¿Hay alguna forma de hacer esto con este programas?, ¿O alguna forma sencilla?.
Mis conocimientos sobre programación web son bastante escasos, algo de html y poco más.