Vers le XVe siècle, le château était une place forte.
C’est au XVIIe siècle que la tour Ouest et le corps principal furent construits par la famille de Lauthonie, complétés en 1764 par la tour Est, bâtie par Monsieur de Chaunac qui avait épousé une demoiselle de Lauthonie.
Cette famille, alliée deux ou trois générations auparavant aux d’Ambert de Sérilhac, vendit le château et ses dépendances à ces derniers, en 1828.
Sur la tour Est du château, on peut admirer une pierre sculptée représentant les blasons des familles de Lauthonie et d’Ambert de Sérilhac¦
