gebouwd in 1521, diende het als de eerste vesting van het eilandje San Juan. Het was de residentie voor Juan Ponce De León en zijn familie, en ook zijn neven, hoewel de Leon stierf in een expeditie naar Florida zonder ooit te krijgen om het gebouw te bezetten. Het werd gebruikt als de residentie van zijn nakomelingen, tot het midden van de 18e eeuw.
als fortificatie diende het voornamelijk als toevluchtsoord in tijden van aanval van Taino-rebellen. De korte opstand eindigde vreedzaam nadat een commissie van Caciques (Chieftains) onderhandelde over vrede. Het huis werd gebouwd in hout, maar werd verwoest door brand en herbouwd in steen en metselwerk.Casa Blanca was de eerste residentie van de gouverneur in PR toen de hoofdstad werd verplaatst naar het eilandje San Juan in 1521. Gerenoveerd gedurende 500 jaar was het de residentie van de gouverneurs tot het midden van 1700, toen het kasteel-fort van Sint-Catharina werd gemoderniseerd en werd een werkelijke residentie-Paleis dan opnieuw gedoopt Koninklijke Site van het Paleis van Sint-Catharina van Siena. Na de gouverneur verplaatst naar het einde van de straat, naar Fortaleza, Casa Blanca, met prachtige Canarische Eilanden-stijl balkons en veranda’ s hield de Royal Artillery Officer ’s Brotherhood (Real Cofradía de Artillería), evenals de officiële See voor de Guards de Corps, voor de Spaanse ridders: Santiago, Calatrava, Montesa en Alcántara; voor de militaire ridders’ dwz San Hermenegildo, de soevereine Orde van Sint-Jan van Malta en de Pontificial Equestrian Order van de Heilige het graf van Jeruzalem. Het was in toenemende mate in onbruik tot na de Tweede Wereldoorlog. Het werd gered door het Puerto Ricaanse Instituut voor Cultuur. De omliggende tuinen werden aangelegd door generaal Brooks, de eerste Amerikaanse militaire gouverneur van het eiland in de 20e eeuw.in 1967 werd het complex overgedragen aan de regering van Puerto Rico en uitgeroepen tot historisch monument. In 1981 werd het opgenomen in de Historic American Buildings Survey. Vandaag de dag is het huis een museum van 16de en 17de eeuwse artefacten beheerd door het Instituut van Puerto Ricaanse cultuur.