1567 het dr Erzherzog Ferdinand von Tirol di verschuldet Herrschaft Schwarzenberg ibernuu. Är het 1578 aagordnet, ass d Schwarzeburg soll abdrait wäre, wel si böufällig gsi isch, des isch aber nit gmacht wore. Wu d Burg anne 1583 dur di vordereschtryychisch Regierig z Anzne bsichtigt woren isch, isch si as stark verfalle bezeichnet wore. Noch eme Bricht vun eme Chronischt vum Margarethestift isch anne 1590 nyt me vum Dachstuhl ibrig gsi un d Muure sin au scho zämmeghejt gsi. D Ruine isch schließli im Lauf vu dr Zyt as Steibruch brucht wore.