Palác princů byl původně spojen s budovou zámku. Po požáru roku 1795 bylo zbouráno západní křídlo a palác dostal svou současnou podobu.