El castillo era propiedad de una serie de mujeres, entre ellas la bella Diana de Poitiers, amante de Enrique II, y Catalina de Médicis.
Diane de Poitiers poseía más del castillo que las otras ocupantes femeninas.