O rei polaco Segismundo III e os seus sucesores da dinastía Vasa <unk> Vladislao IV Vasa e Xoán II Casimiro Vasa <unk> recolleron moitas ricas obras de arte no castelo, como telas orientais, tapices e numerosas pinturas de artistas famosos como Tiziano, Veronese, Jacopo, Leandro Bassano, Tintoretto, Palma il Giovane, Antonio Vassilacchi, Tommaso Dolabella, Guercino, Guido Reni, Joseph Heintz, Bartholomeus Spranger, Roelant Savery, Rembrandt, Pieter Soutman, Peter Danckerts de Rij, Paul Peter Rubens, Jan Brueghel o Vello, Daniel Seghers, Daniel Georg Schultz e esculturas de Giambologna, Giovanni Francesco e Adriaen de Susen Vries. Estas espléndidas obras de arte foron destruídas ou saqueadas durante as invasións de Polonia por parte de Suecia e Rusia durante (The Deluge
, en 1655 <unk> 1657). Os suecos levaron todas as fotos, mobles, tapices, a biblioteca real, o arquivo da coroa, numerosas esculturas, pisos enteiros e bandeiras reais. No castelo tiñan un hospital de campaña militar "Lazareth", que ademais contribuíu á devastación dos edificios. Algúns meses despois, os exércitos destruíron o resto, saqueando a maioría dos elementos de cobre e rasgando o resto do chan do castelo.