כתוב המשך לפרק זה - בתחילת המרד ההוסיטי
, משפחת שוויכובסקי חיפשה מקלטים של תומכי הצד הקתולי במחוז ובאמצעות האוצרות שלהם, ברבי. בשנת 1420-21 כבשו ההוסיטים את הטירה פעמיים, והאגדה מספרת שבמהלך המצור השני חץ שנורה מקשת פגע בגזע של עץ אגס וכתוצאה מכך חתיכת עץ פגעה בינה של ז'יז'קה בעין בריאה היחידה שלו. בשנת 1479 הפך מושל המחוז פוטה שוויכובסקי מ-Rýzmberk לבעלים של האחוזה והחל בשיפוץ מתחשב של הטירה בהנחיית המאסטר המפורסם בנדיקט רייט. נבנו מגורים חדשים ומבני שירות, הטירה הוגדלה והתחזקות הוגדלו.