Palazzo Salerno è situato su di un area che un tempo era occupata dal Convento di Santa Croce, oggi di quel convento è rimasta solo una piccola cappella. Ferdinando IV, dopo aver fatto apportare delle modifiche all'edificio nel 1775, stabilì che i cadetti reali dimorassero nell'edificio. In seguito divenne sede dei Ministeri e dimorò anche l'ammiraglio Acton.
