HTML - Menú editable para todo el sitio web

Hola, deseo consultar algo acerca de la programación web:
¿Cómo puedo programar un menú de navegación pero que sea editable en todas las páginas con solo editarlo en una sola?

Me explico: Si tengo un menú con los siguiente enlaces:

* Inicio, acerca de, contacto, noticias. Al estar creando mi sitio web, seguiré añadiendo páginas cada vez más con el fin de depositar información pero al pasar del tiempo tendré cientos de página y quizá quiera agregar al menú una pestaña de "Lo nuevo" y para ello tendría que ir a cada una de esas página para poderle agregar un nuevo <li>. ¿Existe alguna forma para ahorrarme eso?

Amig buena tardes, soy novato en esto, pero una vez hise algo asi y lo ise por medio de Maquetación de páginas web,la cual cargarias en el inicio de cada pagina.y asi siolo editarias el index principal....
Saludos cordiales, tu srvidor. Poncho Garcia...