明洪武二年 (1369) 改坚州置，属太原府。治所在今山西繁峙县东南三里南关。八年(1375) 属代州。成化三年 (1467) 移治东义村 (今繁峙县西)，万历十四年 (1586) 又移治石龙岗 (即今繁峙县)。民国初属山西雁门道。1928年直属山西省。

在山西省东北部、太行山西麓，东南临河北省。属忻州市。面积2368平方千米。人口24.5万。辖3镇、10乡。县人民政府驻繁城镇。“城于山麓，群山环而拱之，故曰繁峙”。春秋晋霍人邑。战国属赵，称霍人。秦置霍人县，属太原郡。西汉改为葰人县，仍属太原郡;又置卤城县，属代郡。东汉废葰人县，卤城县改属雁门郡。东汉末废卤城县。西晋复置葰人县，永嘉后废。隋开皇十八年(598年)移繁畤县(西汉置，故治在今山西浑源县西南)自今应县东于大堡戍(今县东代堡村)，属雁门郡，大业十二年(616年)又移治于武州城。武周圣历二年(699年)县治复东迁于滹沱河南岸杏园村东，属代州。金贞祐三年(1215年)升繁畤县为坚州，属河东北路。明洪武二年(1369年)降州为县，并改为繁峙县，初属太原府，后属代州;万历十四年(1586年)徙县治于今址。清因之。1914年属雁门道，1927年直属山西省。1945年属察哈尔省浑源专区。1949年属山西省忻县专区。1958年与代县合并，属晋北专署。1961年二县复为原制，属忻县专区。1967年属忻县地区，1983年属忻州地区。2000年属忻州市。地处太行、五台、恒山三山之间。滹沱河、青羊河、云雾河、羊眼河、双井河、峨河流经境内。属南温带半干旱气候。农产以高粱、玉米、莜麦、谷子、黍子、豆类、稻、油料作物为主。矿产有铁、硫铁、金、银、铜、铅、钼、锌、硫黄、磷、石英、长石、云母、褐煤、泥炭、石灰石、蓝晶石等。工业有采矿、冶金、机械、化工、建材、酿酒、塑料等。京原铁路和108国道经过县境。名胜古迹有平型关、岩山寺、公主寺、秘魔寺、圭峰寺、吉祥寺、古长城、南洪水王墓等。