La commune de Saint-Montan recèle un patrimoine archéologique et historique extrêmement riche. Toutes les périodes y sont représentées Néolithique, Age du Bronze et du Fer, périodes Gallo-Romaines et féodales.
Mais ce qui fait le caractère du village aujourd’hui c’est l’ensemble castral.

Le château fort, construit sur un éperon rocheux,constitue le point de départ du bourg actuel. Le bâtiment primitif était un donjon et sa construction semble avoir été fait dans un but strictement militaire au Xlème siècle. Puis au XIIIème siècle le château s’est agrandi vers la crête avec de nouvelles constructions ayant une vocation résidentielle. Ensuite au cours des siècles l’habitat s’est développé sur les pentes rocheuses que domine le château. Au fur et à mesure de ces extensions, les remparts ont été agrandis pour assurer la protection des maisons. Dans le courant du XVème siècle le bourg castral atteindra les berges des deux ruisseaux, sa superficie totale est de 2 hectares. Il sera entouré alors d’une importante enceinte tracée très régulièrement, qui existe en majeure partie encore aujourd’hui. On y pénètre encore par trois portes principales dont les derniers remaniements datent du XVIème siècle.
La famille ayant le patronyme « De Saint-Montan » pourrait être à l’origine du château (mention écrite dès 1110). Cependant, dès la fin du XIIIème siècle, Saint-Montan est une coseigneurie.

Partagés entre plusieurs seigneurs, le château et ses annexes, après les destructions des guerres de religion au XVIème siècle, connurent une désaffection progressive (notamment après le passage de l’Amiral Coligny à la solde de l’armée protestante, fort d’une armée d’environ 3 000 hommes et 400 chevaux).

L’ensemble du bourg restera habité jusque dans les années 1880 puis les maisons seront abandonnées petit à petit, au fur et à mesure de la disparition des personnes y habitants, jusqu’à son renouveau et reconstruction entamée dès les années 1970 par l’association des amis de Saint Montan.