Créé au XIe s. par les premiers Capétiens, le château primitif fut agrandi par le roi Philippe le Bel, puis restauré et embelli par le duc Louis Ier d’Orléans à la fin du XIVe s. Par la suite laissé à l’abandon par les seigneurs, le château médiéval fut en partie rasé et reconstruit, de la moitié du XVIIe au début du XVIIIe s. : il devint, grâce à la famille des Phélypeaux de la Vrillière, un « Petit Versailles » avec de magnifiques jardins à la française. Racheté par le duc de Penthièvre en 1784, le château richement meublé et décoré d’œuvres d’art, allait briller de ses derniers feux. A la Révolution, l’architecte orléanais Benoist Lebrun fit l’acquisition du domaine et entreprit la destruction du parc et du château pour revendre les matériaux, ne conservant que la rotonde et la galerie.