Sito all'apice dell'antico borgo di Dolceacqua, in posizione dominante la media Val Nervia, il castello nasce come fortilizio militare per opera dei Conti di Ventimiglia. Nel 1270 viene acquistato insieme a tutto il feudo da Oberto Doria e da allora diventa dimora della famiglia. Ampliato e modificato nel corso dei secoli, ha sempre svolto la funzione di residenza fortificata. Danneggiato dai Franco-Spagnoli nel corso della guerra di successione austriaca, si presenta ora sotto forma di rudere. Al suo interno vengono allestite mostre di vario genere.