Ing abad kaping 14, "donjon" kasebut iku ditambahi karo omah balé. Kulawarga Van Zuylen dibagi dadi sawetara pang: kulawarga Van Zuylen tetep dadi panguwasa kastil nganti abad kaping 14. Ing taun 1422, Frank van Borssele marisi kastil amarga dadi kulawarga déné rabi. Ing taun sing padha kastil kasebut diambrukaké salemah nalika ana gègèran Hoek nglawan Kabeljauw déning kaum Hoek Utrecht. 