Due to the expansion of Sunderland in the 1940s, the castle became surrounded by housing estates including those of Castletown and Hylton Castle.
Durch die Expansion der Stadt Sunderland in den 1940er-Jahren war die Burg auf einmal von Wohngebieten umgeben, die Castletown und Hylton Castle hießen.