Sorto come presidio militare bizantino nel V secolo, con Carlo I d'Angiò accolse sulla cima un fortilizio, mentre in basso già si era sviluppato un borgo che, tra '300 e '500, costituirà il principale centro dell'isola. Nel 1438 Alfonso I fece collegare l'isolotto alla terra mediante un ponte, scavare nella roccia la rampa di accesso e fortificare il castello. Dal 1495 fu abitato dalla famiglia d'Avalos (Francesco Ferdinando sposò nell'ex Cattedrale Vittoria Colonna). Fu abbandonato nel 1809, dopo un pesante cannoneggiamento da parte delle truppe inglesi che assediavano quelle francesi.