Il palazzo fu realizzato su commissione del nobile Girolamo Rosati su progetto dell’Architetto pontificio Antonio da Sangallo il Giovane (1532 circa): al suo interno si nota ancora lo stemma della famiglia Azzolino che acquisì successivamente la proprietà.