ב-1627, השושלת הישירה של משפחת גונזאגה הסתיימה עם וינצ'נצו השני הרשע והחלש, ומנטואה ירדה לאט לאט תחת השליטים החדשים, משפחת גונזאגה-נברס, ענף צרפתי קדט של המשפחה. מלחמת הירושה המנטואנית
פרצה, ובשנת 1630 צבא אימפריאלי של 36,000 שכירי חרב מקיפים את מנטואה, ומביאים את המגפה איתם. פרדיננד קרלו הרביעי, שליט לא כשיר, שהעניין היחיד שלו היה לערוך מסיבות ומופעים תיאטרליים, ברית עם צרפת במלחמת הירושה הספרדית. לאחר התבוסה הצרפתית, הוא מצא מקלט בוונציה ולקח איתו אלף תמונות. עם מותו בשנת 1708, דוכס מנטואה הוכרז כמפוטר ומשפחתו של גונזאגה איבדה את מנטואה לנצח לטובת משפחת האבסבורג של אוסטריה.