Muzeum ma swoją siedzibę w ponad stuletnim budynku, dawnym Szpitalu św. Ducha. Zbiory muzeum liczą obecnie kilka tysięcy pozycji. Najwięcej jest eksponatów etnograficznych, historycznych z cennymi archiwaliami, numizmatycznych i artystycznych. Placówka oprócz działalności wystawienniczej organizuje wystawy czasowe, konkursy historyczne i lekcje muzealne.
Folklor biskupiański i okolic Gostynia oraz przedmioty codziennego użytku zobaczymy na wystawie etnograficznej. Zbiory dotyczące historii Gostynia i okolic zawierają m. in. księgi cechowe, protokolarze bractw kurkowych, towarzystw i lokalnych instytucji.
Ponadto w zbiorach muzeum znajdują się wartościowe archiwalia, np. dokumenty sygnowane przez Jana Kazimierza, Jana III Sobieskiego, Henryka Dąbrowskiego, czy Józefa Poniatowskiego. W placówce zgromadzono liczną kolekcję numizmatów, a w dziale artystycznym obejrzymy ponad trzysta prac malarskich i rzeźbiarskich twórców z ziemi gostyńskiej.