Construido en el siglo XVI por el vizconde de Puységur, el castillo acogió a Gabrielle d'Estrées y a Madame de Sévigné. En 1930, el municipio es propietario del castillo y del parque. Hoy es el ayuntamiento de la ciudad de Clichy-Sous-Bois y ha sido clasificado como Monumento Histórico en 1972.
El vizconde de Puységur construyó el castillo al principio del reinado de Enrique IV. La tradición exige que la amante real, Gabrielle d'Estrées (1573 - 1599), se aloje allí para recibir al rey. El "Bon Roi Henri" ("Buen Rey Enrique") es omnipresente en el departamento de Seine-Saint-Denis. Tras renunciar al protestantismo, se convierte al catolicismo y asiste a la misa en la abadía de Saint-Denis. También caza en el bosque de Bondy, cerca del castillo.
Alexandre Theodore Brongniart (1739 - 1813) es designado para realizar la reorganización del parque. El arquitecto francés se inspira en los jardines ingleses a la moda en Francia a finales del siglo XVIII. Basa sus obras en la variedad y la profusión de la naturaleza. El nuevo jardín toma forma gracias a rocallas y falsas ruinas que rodean un estanque. Hace emerger varias islas y erige un templo del amor, como en una escena teatral.
Durante el siglo siguiente, le Bas de Gourmont, agricultor general y alcalde de Clichy de 1791 a 1794, construyó un invernadero. En 1807, Barmont, banquero, realiza varios cambios, entre ellos la fachada, añadiendo un frontón, un pórtico y balcones de estilo neoclásico.