Eretto da Gregorio IX, passato nel 1295 ai Caetani, presenta un grande loggiato a due archi e bifore sulla fronte ed è sostenuto sul retro da alti contrafforti ad arco. Nell'interno sono diverse sale, alcune con affreschi che imitano arazzi e tessuti; e in queste sarebbe avvenuto l'episodio del leggendario schiaffo dato da Sciarra Colonna, partigiano di Filippo il Bello, a Bonifacio VIII, stigmatizzato da Dante. Nel palazzo è allestito il Museo Bonifacio VIII, con una documentazione sulla vita del pontefice agnanino, una raccolta archeologica e una mostra documentaria relativa alla storia e ai monumenti di Anagni. Poco distante sorge il palazzo Traietto, antica dimora di Bonifacio VIII trasformata nel '700, che nel lato settentrionale mantiene il severo aspetto medievale, con alti archi ogivali.