Muzejs atrodas bijušajā Kurzemes hercogu vasaras rezidencē, ko arhitekts Frančesko Bartolomeo Rastrelli cēlis Kurzemes hercogam Ernstam Johanam Bīronam 1736.-1740. gadā. Pils telpas saglabājušas savu sākotnējo dekoratīvo apdari, kas kara laikā tikusi bojāta, bet nav pārveidota, kas arī noteicis šī arhitektūras pieminekļa unikalitāti un sarežģīto uzdevumu restaurācijai maksimāli pietuvināt restaurētos fragmentus oriģinālam. Pilī ir Berlīnes tēlnieka Johana Mihaela Grafa veidotā dekoratīvā un mākslīgā marmora sienu apdare. Itāļu gleznotāji no Pēterburgas Karlo Cuki un Frančesko Martini izpildījuši 7 telpu plafonu gleznojumus un 2 telpu sienu gleznojumus. Nozīmīga ir arī pils I stāva gaiteņu, divu kāpņu telpu un Mazās galerijas dekoratīvā apdare, kas ir vienīgais arhitekta Rastrelli agrīnās darbības paraugs, kas radīts laikā līdz 1740. gadam.