Zbudowany przez rodzinę Suardi w połowie XIV wieku, później stał się własnością Konsorcjum Misericordia i rodziny Avogadro.
XIV wieku, później stał się własnością Consorzio della Misericordia i rodziny Avogadro, a od 1428 do 1797 roku był siedzibą Podesty Bergamo, najwyższego przedstawiciela państwa Veneto w mieście. W 1477 roku fasada została ozdobiona freskami Donato Bramante, których nieliczne fragmenty zachowały się w Salone delle Capriate w Palazzo della Ragione.
Z biegiem czasu Palazzo przeszedł wiele zmian i funkcji.
