Gråsten jest niewielkim miastem, w którym znajduje się letnia rezydencja duńskiej rodziny królewskiej. Choć zamku zwiedzać nie można, to dla turystów udostępniane są jego ogrody.
Historia miasta związana jest ściśle z Zamkiem Gråsten. Zbudowała go w początkach XVIII w. rodzina Ahlenfeldtów i władała nim do drugiej połowy XIX w., gdy tereny te zostały przyłączone do Prus. W 1920 r., po plebiscycie w Szlezwiku i powrocie południowej Jutlandii do Danii zamek został wybrany na letnią rezydencję duńskiej rodziny królewskiej. Miało to podkreślić związki państwa z przyłączonym terytorium. Obecny kształt rezydencja otrzymała w 1935 r. po trwającej kilka lat przebudowie.
Zamek Gråsten jest obecnie największą atrakcją miasta. Otacza go Ogród Zamkowy Gråsten, a we wnętrzu znajduje się kościół zamkowy Gråsten. Obecnie służy on jako kościół parafialny. Park otwarty jest dla zwiedzających, gdy w rezydencji nie przebywa rodzina królewska.
Oprócz zamku w Gråsten znajduje się także niewielkie Muzeum Papieru By. Okolica oferuje wiele ładnych miejsc do spacerów, a na pobliskim jeziorze można uprawiać sporty wodne. Popularnym celem spacerów jest latarnia morska Forfyr Rinkenæs, a niedaleko niej znajduje się też pole golfowe.