河北北岳由于處于北方要地，南北朝、五代十國、宋元時期歷經(jīng)戰(zhàn)火，長期處于漢族政權(quán)的掌握之外，加上多次更名，導致人們對古北岳的認知淡薄，這也是明朝改封山西渾源玄武峰為北岳恒山的背景原因。

但出于文化傳統(tǒng)上的原因，明代只改岳不改廟。明朝靖難之役后，首都改為北京，但當時北岳位于北京以南，而渾源在北京西北，方向符合。但這引起了朝臣的激烈爭論，一直持續(xù)到萬歷年間。萬歷時定渾源玄武峰為北岳但歷史的朝代都有“改都不改岳”的先例，所以祭祀北岳的活動在原北岳廟舉行。

到了清朝，順治帝卻御批“移祀北岳于渾源”從此渾源成了祭祀北岳的地方。