Après l'effondrement d'un grand projet de construction d'un musée sur une île au milieu de la Seine pour exposer une vaste collection de Pinault, il décide de déménager de Paris à Venise et achète un palais sur le Canal Grande à Fiat pour 29 millions d'euros.. Mais pour la reconstruction du monument architectural et son adaptation aux besoins du musée, Pinault s'est à nouveau tourné vers Tadao Ando, l'auteur du projet non réalisé de son musée parisien.
40 salles du palais (5000 m²) ont été utilisées pour l'exposition. L'architecte a minimisé ses interférences en faisant très attention à l'intérieur du XVIIIe siècle. Il a recouvert les murs richement décorés de panneaux blancs ancrés par des fermes en aluminium. Ces poutres métalliques servent également de base à un système d'éclairage de 1 500 luminaires. Un auvent est tendu au-dessus de la cour à une hauteur de 20 m, amortissant la lumière du soleil.