這座建築始建於1455年,是羅馬最早的文藝復興建築之一;立面右側是中世紀塔樓。大部分石料取自附近的羅馬鬥獸場,直到最近幾個世紀在羅馬這是常見的做法。威尼斯樞機主教皮埃特羅.巴博,後來的教宗保祿二世居住於此,在此可以觀看毗鄰的科爾索路(Via del Corso)上的賽馬場。
這座建築成為教宗住所,庇護四世將這座建築的大部分給予威尼斯共和國用作使館。在19世紀,這座建築是奧匈帝國駐梵蒂岡使館。
1917年,意大利獲得這座建築的所有權。墨索里尼的辦公室設在Sala del Mappamondo,官邸也設在宮內,墨索里尼大多使用這座宮殿的陽台向聚集在威尼斯廣場的人群演說。
威尼斯宮博物館設在這座建築內,包括美術館,主要是從公元初到文藝復興早期的陶器、織錦、雕塑。