bygget i 1521 fungerede det som den første befæstning af San Juan islet. Det var residensen for Juan Ponce de le Kurstn og hans familie, og også hans fætre, selvom de Leon døde i en ekspedition til Florida uden nogensinde at komme til at besætte strukturen. Det blev brugt som bopæl for hans efterkommere indtil midten af det 18.århundrede.
som en befæstning tjente det mest som et tilflugtssted i tider med angreb fra Taino-oprørere. Det korte oprør sluttede fredeligt, efter at en kommission af Kakikere (høvdinge) forhandlede fred. Huset blev bygget i træ, men blev ødelagt af ild og genopbygget i sten og murværk.Casa Blanca, det var den første guvernørs bopæl i PR, da hovedstaden blev flyttet til Holmen San Juan i 1521. Renoveret langs 500 år var det guvernørernes bopæl indtil midten af 1700 ‘ erne, da slottet-fæstningen St. Catherine blev moderniseret og blev et faktisk bopælspalads, der derefter blev døbt kongeligt sted for slottet St. Catherine of Siena. Efter guvernørens flyttet til slutningen af gaden, til Fortalesa, Casa Blanca, med smukke Kanariske Øer-stil balkoner og verandaer holdt Royal Artillery Officer’ s Brotherhood (Real Cofrad Larra de Artillerigerrista) samt at være den officielle se for Guards de Corps, for de spanske ridderordrer: Santiago, Calatrava, Montesa og Alcursntara; for de militære riddere ‘ dvs.San Hermenegildo, den suveræne orden af St. John of Malta og den Pontificial ridderorden af St. John of Maltas den hellige grav i Jerusalem. Det var i stigende grad i brug indtil efter Anden Verdenskrig. Det blev reddet af Puerto Ricas Kulturinstitut. De omkringliggende haver blev plantet af General Brooks, den første amerikanske militærguvernør på øen i det 20.århundrede.
i 1967 blev komplekset overført til Puerto Ricos regering og erklæret et historisk monument. I 1981 blev det registreret i Historic American Buildings Survey. I dag er huset et museum for artefakter fra det 16.og 17. århundrede, der administreres af Institute of Puerto Rican Culture.