La historia del castillo se remonta al siglo XII, mientras que los restos de muros y edificios que han sobrevivido hasta el día de hoy provienen principalmente de los siglos XIV-XVII. Actualmente, se pueden visitar tanto las ruinas como el amplio jardín de rosas contiguo, establecido en el sitio del patio económico. Hay alrededor de 3500 rosales de más de 100 variedades diferentes.
En su apogeo, el castillo sirvió primero como una fortaleza defensiva de gran importancia en todo el condado. En los siglos siguientes fue reconstruida y transformada en una residencia confortable y lujosa. Sus propietarios cambiaron con relativa frecuencia a lo largo de los siglos, pero casi siempre estuvo en manos de familias poderosas como Croÿ, Enghien y Harcourt.
A partir del siglo XIX, el castillo se fue destruyendo gradualmente. En 1930, parte del edificio se derrumbó, y al resto se le otorgó el estatus de monumento y el llamado "Ruinas históricas". Actualmente, se organizan regularmente eventos privados y al aire libre en los terrenos del castillo.