L’edificio dunque, in seguito noto come ‘Palazzo Sforza’, aveva funzione di nobile abitazione con dipendenze affiancate e disposte nelle immediate vicinanze come venne documentato negli acquerelli di Romolo Liverani, realizzati nella prima metà dell’Ottocento.
Fu poi sottoposto a un generale intervento di recupero nel 1894-1897 e al termine dei lavori fu dichiarato Monumento Nazionale per l’Arte e la Storia, ma ciò non valse a risparmiarlo dalla distruzione provocata dai bombardamenti del 1944 e 1945. Il palazzo fu sventrato, il tetto e i piani crollarono completamente, rimasero solo alcune parti dei muri perimetrali. L’edificio fu poi ricostruito nel 1961, su progetto dell’architetto Carlo Visani di Lugo, nel rispetto delle forme originali, con gli archi gotici e le finiture in cotto che un tempo lo caratterizzavano.

Attualmente le sale al piano terra sono adibite a mostre temporanee e alla sezione sulla Cotignola del Rinascimento, al primo piano sono allestite la Pinacoteca dedicata a Luigi Varoli e la Sala Archeologica. Di quest’ultima fanno parte anche le steli funerarie di epoca romana conservate nel cortile che affaccia su via Matteotti.