Le château est édifié sur les ruines d'un ancien château construit par Jean d'Harcourt, et détruit lors d'un incendie en 1763. Le château est entièrement reconstruit entre 1763 et 1784.
D'importants remaniements ont lieu au XIXe siècle.
Après 1866, la chapelle et la galerie nord sont construites.
