اكتب استمرار لهذه الفقرة - العقود اللاحقة كانت أقل عاصفة. تم تدمير ليدا من قبل التتار القرميين في عام 1506 وأخذها الروس خلال الحرب الروسية البولندية في عام 1659. السويديين، الذين استولوا عليه مرتين خلال الحرب الشمالية العظمى، فجروا البرجين. في عام 1794، كانت أراضي القلعة موقع معركة بين أتباع كوشيوسكو
و الروس.