东汉建武年间（25-56）建苏岭山神祠于山上，门前刻二石鹿，人称鹿门寺。西晋时鹿门寺改称万寿寺，唐代富名鹿门寺。宋代最为兴盛，有佛殿、僧寮、斋堂约500多间。汉末庞德公，唐代孟浩然、皮日休等皆曾在此隐居。明代以前建有庞公祠供庞德公像，明嘉靖四年（1525年）又建祠，并祀庞、孟、皮，人称“三高祠”。明末被毁，现存祠，系晚清建筑，寺内现存有宋刻塔记和明清石碑等，记载着鹿门寺高僧事迹，以及兴废始末。近年复建庙门寺大殿、佛堂、山门、牌坊和孟浩然亭等建筑。
据县志载："汉建武中帝与当时的襄阳候--习郁俱梦见苏岭山神。命郁立祠于山上，刻二石鹿夹道口，百姓谓之鹿门庙。遂以庙名山。”此寺鼎盛时，有佛殿、僧寮、斋堂、方丈室等约500间，有“骑马关山门”之说。后几经损毁，1980年始逐步修复。鹿门山是名人高士的隐居之地，汉末名士庞德公不受刺史刘表数次宴请，携家登鹿门山采药不返。诸葛亮拜其为师常来讨教，后有隆重对策天下三分。唐代诗人孟浩然幽居鹿门山，吟咏山水自得乐趣；晚唐文学家皮日休也曾忿栖鹿门山。因此，人们称“鹿门山高士傲帝王”。唐宋八大家之一的曾巩作有“不踏苏岭石，虚作襄阳行”的诗句，使鹿门山一度成为襄阳的代名词。
据县志载："汉建武中帝与当时的襄阳候--习郁俱梦见苏岭山神。命郁立祠于山上，刻二石鹿夹道口，百姓谓之鹿门庙。遂以庙名山。”此寺鼎盛时，有佛殿、僧寮、斋堂、方丈室等约500间，有“骑马关山门”之说。后几经损毁，1980年始逐步修复。鹿门山是名人高士的隐居之地，汉末名士庞德公不受刺史刘表数次宴请，携家登鹿门山采药不返。诸葛亮拜其为师常来讨教，后有隆重对策天下三分。唐代诗人孟浩然幽居鹿门山，吟咏山水自得乐趣；晚唐文学家皮日休也曾忿栖鹿门山。因此，人们称“鹿门山高士傲帝王”。唐宋八大家之一的曾巩作有“不踏苏岭石，虚作襄阳行”的诗句，使鹿门山一度成为襄阳的代名词。
