Il palazzo è considerato come una delle più pregevoli creazioni architettoniche del Palladio. Racchiude una bella collezione di primitivi veneziani quali Paolo Veneziano, un capolavoro di Hans Memling (Crocifissione), tele di Bartolomeo Montagna, Bassano, Veronese, Tintoretto e Luca Giordano. All'ultimo piano, la collezione donata dal marchese Fogazzaro Roi presenta opere di Manet, Picasso e Giacometti.