La Biblioteca oliveriana conserva oltre 354.000 volumi, grazie ai lasciti di pesaresi illustri e alle acquisizioni di preziose raccolte provenienti da fondi conventuali, delle corporazioni e degli enti, tra tutti il fondo dell'ex ospedale psichiatrico "San Benedetto". L'attuale collocazione della Biblioteca, presso il Palazzo Almerici, risale al 1892 ma il nucleo originario della raccolta libraria è datato 1756, con la donazione "alla comunità", da parte dell'erudito Annibale degli Abbati Olivieri, del suo fondo comprendente centinaia di pergamene, manoscritti e opere a stampa<div id="poi-openinghours">Apertura: lunedì-venerdì 8.30-18.45, sabato 8.30-13; variazioni in base ai periodi stagionali</div><div id="poi-conditions">ingresso gratuito</div>