Installé sur un promontoire schisteux qui domine le Lot, le château fut pendant près de huit siècles la résidence de la famille d' Estaing, l'une des plus illustres du Rouergue.