Schrijf een voortzetting voor deze paragraaf - Aan het begin van de Hussitische opstanden
, zocht de Švihovský-familie naar toevluchtsoorden van aanhangers van de katholieke kant in het district en naar hun schatten in Rábí. In 1420-21 veroverden de Hussieten het kasteel tweemaal, en de legende gaat dat tijdens het tweede beleg een pijl afgevuurd uit een kruisboog de stam van een perenboom raakte en een daaruit voortvloeiende splinter van de boom Jan Žižka raakte in zijn enige goede oog. In 1479 werd de provinciegouverneur Půta Švihovský van Rýzmberk eigenaar van het landgoed en begon met een doordachte verbouwing van het kasteel onder leiding van de beroemde meester Benedict Rejt. Er werden nieuwe woongebouwen en dienstgebouwen gebouwd, het kasteel werd vergroot en de vestingwerken verhoogd.