Rastatt jest miastem o zachowanej barokowej zabudowie, która powstała w XVIII w. w wyniku decyzji margrabiów Badenii. Znajdują się tu dwa pałace, w których można podziwiać nie tylko dobrze zachowane wnętrza, ale także eksponaty kilku muzeów.
Do XVIII w. Rastatt było niewielkim, niewyróżniającym się miasteczkiem o lokalnym znaczeniu handlowym. Jego złoty wiek rozpoczął się pod koniec XVII w., po tym gdy zostało zniszczone przez Francuzów. Odbudowę rozpoczęto na polecenie Ludwika Wilhelma, margrabiego Baden, który przeniósł tu swoją siedzibę.
Do 1770 r. w Rastatt zamieszkiwali margrabiowie Baden-Baden. Wzniesiono tu wówczas Zamek Rastatt, który dziś jest największą atrakcją miasta. Jest to typowy przykład barokowej rezydencji "między podwórzem a ogrodem". W jej sąsiedztwie znajduje się malowniczy park zamkowy z oczkami wodnymi i alejami spacerowymi. Wnętrza pałacu przetrwały w dobrym stanie czasy II wojny i są dziś prezentowane zwiedzającym. Znajduje się tu także Muzeum Historii Wojskowości oraz Muzeum niemieckich ruchów niepodległościowych związane z wydarzeniami, jakie miały tu miejsce w okresie wiosny ludów.
Na obrzeżach Rastatt znajduje się barokowy zamek Favorite. Został zbudowany jako pałacyk myśliwski i miejsce odpoczynku margrabiów Baden-Baden. Obecnie w jego wnętrzach prezentowane są bogate zbiory porcelany.
Poza pałacami w Rastatt zachował się także zabytkowy rynek z kamienicami z XVIII i XIX w., a także kilka interesujących kościołów.
