L'edificio venne costruito sul sito del tempio romano di Serapide (resti ancora visibili) tra il 1722 e il 1732 su progetto di Alessandro Specchi poi modificato e portato a compimento da Ferdinando Fuga. Rimessa di carrozze e cavalli e quindi di auto della casa reale, le scuderie furono progressivamente abbandonate; nel 1977 sono state oggetto di un formidabile intervento di restauro e trasformate da Gae Aulenti in splendido spazio espositivo.