Isa sa mga pinakasikat na museo sa Kolonyal na Lungsod ay ang pinakakahanga-hangang arkitektura nito. Nakumpleto noong 1512, ang Gothic at Renaissance style na palasyong ito ay dating tahanan ni Diego Columbus, anak ni Christopher Columbus, at ng kanyang asawang si María de Toledo, pamangkin ni Haring Ferdinand ng Spain. Sa mga tanawin na tinatanaw ang Plaza de España sa isang gilid, at ang Ozama River sa kabilang panig, ito ang pinakamatandang vice regal residence sa Americas, at ang unang pinatibay na palasyo, na ginawang isang museo na nagpapakita ng ika-16 na siglong kasangkapan, sining, mga instrumentong pangmusika, at mga armas. Ang mga paikot-ikot na hagdanan ay humahantong patungo sa maayos na mga silid ng mag-asawa, at sa marangyang kristal na chandelier-lit na reception hall kung saan idinaos ang mga kaganapan para sa aristokrasya ng Espanya.