Du château ducal édifié au début du XVIIe siècle par le premier duc d'Epernon,
il ne reste que les parties aux toits gris sont du XVIIe siècle.
Ce palais ducal était entièrement construit autour de la cour d'honneur (1).
Mais les successeurs des ducs d'Epernon (les Preissac),
n'ayant pas les moyens d'entretenir l'édifice, firent démolir les ailes et la façade
pour récupérer des fonds pour mettre l'édifice au goût du jour.
C'est pour cela que les ailes et le pavillon d'entrée sont du XIXe siècle.
Le château fut acquis par la suite par l'Etat et transformé
en centrale de force pour femmes en 1818.
(les parties aux toits de tuiles ont été construites au XIXe siècle)
La prison est fermée en 1890, au profit d'un centre d'éducation pour jeunes filles.
Dans ce château affecté au ministère de la Culture 1956,
les programmes de restaurations se succèdent.