השלים את המשפט הבא:
רעידת האדמה ב-1755 שפגעה ברוב פורטוגל הרסה חלק מהבניין, אשר לאחר מכן שוקם. בשנת 1773 בוצעו עבודות לשיפוץ הקפלה של סנטה ברברה בתוך המבצר. זמן קצר לאחר מכן נערך דו"ח ביקורת שהגיב באופן שלילי על מצבו וב-1800 נבנו סוללות חדשות כדי להפוך את הנחיתה בנמל לקשה יותר, וגם הגדרת המבצר הפונה אל הים הועלתה בגובה. היקף העבודה הביא לבעיות כלכליות עבור האוכלוסייה המקומית, אשר ביקשה וקיבלה סיוע ממלכה מריה הראשונה. שיפורים נרחבים נוספים בוצעו בשנת 1807. עם זאת, המבצר הוכיח כי הוא לא יעיל בדצמבר 1807 במהלך מלחמת חצי האי, כאשר כוחות צרפתיים-ספרדיים נחתו בפנישה. בעקבות תבוסתם על ידי כוחות אנגלו-פורטוגזים, הוא נחשב לזמן קצר בשנת 1810 כנקודת העלייה אפשרית של כוחות בריטיים אם הפלישה הצרפתית המתחדשת תגרום לכך. לאחר קונגרס וינה בשנת 1815, אשר ייסד שלום בתוך אירופה, המבצר ננטש. עם לחץ עירוני הנובע מגדילת האוכלוסייה של פנישה, חלקים מסוימים הושמדו. בשנת 1824 הוא הועבר באופן זמני לכלא ושימש להחזיק אסירים פוליטיים. במהלך מלחמת האזרחים הפורטוגזית (1828-1834) היא נכבשה מחדש, אך כאשר הכוחות הליברליים כבשו את מבצר ברלנגאס בשנת 1833, הכוחות האבסולוטיסטים עזבו את פנישה. בשנת 1837 פיצוץ של אבק שריפה בתוך המבצר הוביל לשריפה אלימה, שהרסה לחלוטין את בית המושל. בשנת 1871 דיווח מושל המבצר על מצבו הרע, וביצעו כמה עבודות שיקום.