Completa la següent frase: A finals del segle XVI, Portugal havia perdut la seva independència després dels esdeveniments de
Alcácer Quibir. La regió i el poble de Loulé estaven, una vegada més, amenaçats per atacs costaners de pirates al llarg de la costa, però les defenses del castell ja estaven amenaçades i havien caigut en ruïnes. Després de 1630, la vitalitat econòmica de l'Algarve va començar a caure, la seva població es va estancar i la inestabilitat política va contribuir a la pirateria de la Costa de Barbaria. L'expansió de la regió va patir, fins i tot mentre es construïen nous edificis: el 1600, es va construir l'Església de Portes do Ceu; en les tres portes del castell es van construir ermites a Nossa Senhora da Conceição, Nossa Senhora do Pilar i Nossa Senhora do Carmo; al pati, es va construir l'Església de l'Esperit Sant (recuperat i ampliat el 1693); es va expandir el convent del Convent de Nossa Senhora da Conceição; i a l'est, D. Francisco Barreto, segon bisbe de l'Algarve, va posar la pedra angular del Convent de Santo António (1675). Després de la Restauració, el castell va assumir un paper defensiu i les terres que envoltaven l'estructura van ser ocupades per noves construccions.