Raně gotický hrad pochází z 2. pol. 13. století, přestavěn a opevněn byl kolem roku 1420, upraven v 16. století. Po opuštění horního hradu bylo na předhradí postaveno v 17. století nové stavení, které bylo upraveno novogoticky v letech 1834 až 1836. Hrad je pravděpodobně rodištěm cestovatele Kryštofa Haranta z Polžic a Bezdružic. Dnes zde sídlí okresní galérie výtvarného umění s expozicí umění 19. a 20. století.