Muzeum mieści się prywatnym dom należącym dawniej do bankiera i kolekcjonera Davida Van Buuren i jego żony Alice. Znajduje się w nim zgromadzona przez nich obszerna kolekcja dzieł sztuki, w tym dzieła Pietera Bruegela Starszego, Herculesa Seghersa, Vincenta van Gogha i Henri Fantin-Latour. Jest tu także kolekcja 32 obrazów Van de Woestijne’a.
Dom został urządzony w stylu Art Deco. W salonie znajduje się obszerna kolekcja modernistycznych dywanów zaprojektowanych przez holenderskiego projektanta Jaapa Giddinga. Stoi tu również fortepian wykonany z drzewa różanego. W holu wejściowym można obejrzeć masywny żyrandol w stylu Art Deco o masie blisko 500 kg.
Dom otacza rozległy ogród, podzielony na trzy tematyczne części. Pierwsza to geometryczny “Malowniczy ogród”, zaprojektowany przez architekta krajobrazu Julesa Buyssensa. Druga część to zdobiony rzeźbami labirynt, a trzecia jest utrzymana w stylu romantycznym.