Ca’ d’Oro’nun asıl adı Palazzo Santa Sofia,  Büyük Kanal üzerindeki en eski saraylardan bir tanesi. Saray, Venedik’i yöneten Doge’lardan 1043-1676 yılları arasında 8 tanesini çıkaran Contarini ailesi için 1428 – 1430 yılları arasında yapılmış. Dış duvar süslemeleri ve yapısı nedeniyle “Altın Ev” olarak da biliniyor. 1797 yılında Venedik Cumhuriyeti yıkılınca, saray bir kaç defa el değiştirmiş. Sahiplerinden birisi olan ünlü balerin Marie Taglioni tarafından günümüzde vandallık olarak anılacak şekilde balkon ve iç merdivenlerinin yıkılması haricinde değişime uğrayan saray daha sonra sanat koleksiyoncusu olan Baron Giorgio Franchetti tarafından alınmış. Baron aslına uygun restorasyon yaptıktan sonra 1916 yılında, sarayı İtalyan Hükümetine devretmiş. Günümüzde de galeri olarak kullanılmakta.

Ca’ d’Oro yazısı ilk önce Turrehberin.com üzerinde ortaya çıktı.