Ljúktu eftirfarandi setningu: Á Middle Head (norðan við Obelisk Bay) var reist byssuhurð árið 1801 meðan á Napóleonastríðunum stóð, auk þess sem önnur var reist á Georges Head. Fort Phillip var einnig byggt til að vernda gegn hugsanlegri frönsku innrás árið 1804, auk þess að fylgja
Á sama ári var uppreisn á Castle Hill. Meira varanleg festingar voru byggð á fyrri hluta 19. aldar í viðbrögð við ótta fyrir erlendum árásum með nýjum ógnum gegn breska keisaradæminu, þar á meðal frönskum herjum Napóleons árið 1810 og rússneska Kyrrahafsflotans á tíunda áratugnum (í Krímastríðinu). Á sama tíma komu tvö bandarísk herskip (herskip PEACOCK og herskip VINCENNES) ófyrirséð í höfnina 30. nóvember 1839. Þótt þetta væri bara kurteis heimsókn sýndi viðburðurinn viðkvæmni byggðarinnar fyrir árásum og varpaði athygli á einangrun hennar og auðæfi. Á Garðeyjunni voru byggðar festingar á 18. áratugnum en Bradleys Head var byrjað að byggja árið 1840. Framkvæmdir við Fort Denison hófust árið 1841, þó að festingin hafi ekki verið fullbúin fyrr en árið 1857.