位于霍山县衡山镇文盛街中段，占地面积约4027平方米，现有建筑面积2052平方米。

始建于明弘治五年（公元1492年），明万历二十九年（公元1601年）曾就原庙重加修缮，“使规制巍峨，精彩焕发，顿令邑中改观”，明崇祯八年（公元1653年）按原规模加以恢复，乾隆十八年（公元1753年）由邑贡生，士民等乐输捐献，筹集巨资，将文庙整体建筑群扩大并进行大修。咸丰、同治年间也进行过修葺，民国三十四年（公元1945年）曾进行过整修。1984年，由省文物局拨款对将倾的大成殿进行彻底翻修，后由国家、省文物局，霍山县人民政府拨款连续修复了藏经阁、崇圣祠、明伦堂、东西庑、戟门、各宦祠、乡贤祠等主体建筑。

文庙现存主体建筑有大成殿（又称圣殿），后为崇圣祠、明伦堂，左后为藏经阁；殿左为东庑，右为西庑；殿前为戟门，戟门左为名宦祠，右为乡贤祠共45间均为小瓦、砖、石、木结构，现保存基本完整。文庙建筑以院落为单位，四周筑有2.5米高的围墙。院落由主要建筑物“正殿”和“侧殿”，以及“回廊”、“耳房”等附属建筑物组成。各建筑物在组合布局上以“正殿”（大成殿）的中线为轴线，其它建筑左右均衡对称分布。另外以大成殿的高度为准，各建筑高低起伏、变化有致，表现出一定韵律节奏的连续性。在材料上，文庙主要均为小瓦、砖、石、木结构。色彩上，以黑红为主。屋身梁、柱、墙、门、窗均为红色，屋顶皆为黑瓦，台基主要是大块青石。文庙各建筑的屋顶主要有重檐歇山顶、硬山顶另种形式，其中硬山顶的建筑都筑有山墙；屋身根据建筑物的主次不同，主要有大木小式构架和穿斗式构架。

 大成殿面阔五间，进深三间，采用大木小式构架，殿高8米左右。大殿前后檐各有6根檐柱，没有山柱。殿内处中柱外还有多根金柱。梁长四步，为五架梁结构。梁架中的叉手、托脚被取消，纵向的联系构件较少，襻间、串等也被统一成檩、垫、枋三位一体的标准作法（即"一檩三件"）。