Ljúka eftirfarandi setningu: Í lok 16. aldar hafði Portúgal misst sjálfstæði sitt í kjölfar
Alcácer Quibir. Svæðinu og þorpinu Loulé var enn einu sinni ógnað af árásum sjóræningja meðfram ströndinni, en varnir kastalans höfðu þegar orðið ógnar og fallið í rúst. Eftir 1630 fór efnahagslega lífsgæði Algarve að falla, íbúafjöldi þess stöðvast og pólitískt óstöðugleiki stuðlar að sjóræningjum á Barbary Coast. Útbreiðsla svæðisins þjáðist, jafnvel þegar nýjar byggingar voru byggðar: árið 1600 var kirkjan Portas do Ceu byggð; í þremur hliðum kastalans byggðu þeir hermitages til Nossa Senhora da Conceição, Nossa Senhora do Pilar og Nossa Senhora do Carmo; í garðinum byggðu þeir kirkjuna Espírito Santo (sem var síðan endurheimt og stækkuð árið 1693); stækkaði nunnaklossið í Klossi Nossa Senhora da Conceição; og í austri, D. Francisco Barreto, annar biskup Algarve, lagði hornsteinið á Klossi Santo António (1675). Eftir endurreisnina tók kastalinn að sér varnarhlutverk og lönd umhverfis mannvirkið voru í nýjum byggingum.