כתוב המשך לקטע זה - לפני שנבנה הארמון, הבישופיה של קרקוב הייתה ממוקמת בוואוול מאז שנת 1000, שם עדיין קיימים שרידי מבנים קודמים. הארמון, שהוקם במיקומו הנוכחי ברחוב אול. רחוב פרנסיסקנסקה 3 מול הכנסייה הפרנציסקנית ההיסטורית בקראקוב, מוזכר לראשונה במאה ה-14. היא הושמדה על ידי שריפה בשנת 1462 ולאחר מכן נבנתה מחדש. הארמון נבנה מחדש עם גרם מדרגות חדש ופורטיזציה של שערים על ידי הבישוף פיוטר גמביצקי בשנים 1642-1647. הוא שופץ לאחר הפלישה השוודית.
בשנת 1655, ומוסד מחדש שוב בשנת 1817-1820 על ידי Szczepan Humbert. בשנת 1850 שריפה ברחבי העיר שרפה את רוב הרהיטים והציורים של מזכרות לאומיות. האדריכל טומאס פרילינסקי פיקח על שיפוץ הארמון בשנת 1881-1884. למרות ההיסטוריה הסוערת שלה, כולל שריפות ומגבלות לאומיות שונות כמו המפלגות, הארמון תמיד שירת את מטרתו המקורית.