Zámek tvoří dominantu města. Vznikl přestavbou hradu v letech 1622-24 Jáchymem Novohradským z Kolovrat. Nejstarší dochovanou částí zámku je Vlčkova věž.