Sul Canal Grande, nella contrada di San Silvestro e di fronte a Ca’ Farsetti, questo palazzo è una delle case-fondaco più antiche della riva: i Contarini la costruirono nel XIII secolo e, secondo gli studi di Wladimiro Dorigo, qui si teneva un fontego di schiavi.