Twierdza wznosi się na szczycie dominującego nad miastem wzgórza (369 m. n.p.m.), zwanego Zamkowym lub Fortecznym. Wcześniej na wzgórzu tym w X wieku istniał gród warowny zniszczony w czasie walk o tron czeski w 1114 roku. Na miejscu grodu wniesiono kamienny, gotycki zamek. W 1557 roku został przebudowany w stylu renesansowym i powiększony o zamek dolny, który został ufortyfikowany i przystosowany do broni palnej. W 1662 roku zdobyty i częściowo wysadzony w powietrze przez wojska cesarskie Ferdynanda Habsburga