Il castello fu eretto nel XIII secolo su un precedente castro bizantino. Più volte ingrandito dai Frankopani, che gli diedero l’attuale aspetto a pianta quadrilatera con torrioni angolari, fu acquistato nel 1826 dal feldmaresciallo austriaco Laval Nugent, che lo restaurò e ne fece il luogo di sepoltura della famiglia, costruendo al suo interno un piccolo tempio di stile dorico. Da una terrazza si gode la vista sul golfo del Quarnaro e sulla città, di cui si colgono le imponenti strutture del porto, i moderni edifici sulla collina, gli insediamenti industriali nella stretta valle della Fiumara.