Pałac został zbudowany w XI wieku jako siedziba książąt czeskich. W budowli można wyróżnić trzy różne fazy architektoniczne. Piwnice obecnego pałacu są pozostałością romańskiego pałacu Sobiesława I, wzniesionego około 1135 roku. Na tych fundamentach powstały pałace Przemysła Ottokara II i Karola IV. Najwyżej mieści się potężna gotycka Sala Władysławowska, wzniesiona przez Władysława Jagielończyka.