Hrad byl po svém zakladateli Karlu IV. nazván Karlskrone, jméno se však neujalo a hradu se dál říkalo podle starého názvu vrchu. Stavbou hradu byl v roce 1356 pověřen Vít Hedvábný, jméno stavitele neznáme, uvažuje se o Michalu Parléři. Za husitských válek zůstal v královské moci a byl oporou protihusitského tábora. Posléze byl zastavován. Po roce 1530 hrad vyhořel a zpustl. V 19. století byl romanticky upravován. Poslední opravy hradu proběhly v posledních letech. Veřejnosti přístupné zříceniny hradu jsou v majetku města . Hrad je typickým příkladem staveb Karla IV. s mohutnou srostlicí obdélného paláce a dvou věží, z nichž hranolová slouží jako rozhledna. V interiéru paláce jsou patrné detaily vybavení místností s prevety, okny se sedátky, krby a otisky roubených vyložení stěn s charakteristickou sestavou tří okének. Další stavby na předhradí jsou dochovány jen v základovém zdivu. Výrazná je především obvodová hradba zpevněná baštami a příkopové a valové opevnění. Severně od hradu při naučné stezce se nachází zajímavý skalní útvar Andrejšky, který je přírodní památkou.