O 1 de novembro de 1755, o castelo foi danado polo terremoto de Lisboa.
, resultando na "...perda da súa catedral, torre, castelo e murallas "..., como identificado por Moreira de Mendonça (1758). En algún momento durante o século XVIII, os calabozos foron reconstruídos, despois do terremoto, e os teitos pintados de novo.