Yasan utama saka gedhong iki minangka yasan kang pisanan diyasa déning arsitèk A. Payen sing dipilih langsung déning Gubernur Jénderal Hindia Walanda nalika wektu semana. Prosès yasané gedhong iki tau kandheg sedhéla amarga ana Perang Dipanagara (1825-1830) kang uga kondhang kanthi jeneng Perang Jawa ("Java Oorlog"). Sawisé perang rampung, prosès yasané gedhong iki dibacutaké manèh nganti pungkasané ing taun 1832. Yasan iki banjur didadèkaké kantor résidhèn. Yasan iki pernahé adhep-adhepan karo loji gedhé Bètèng Vredeburg. Ing jamané India-Néderlan, gedhong iki kondhang minangka jeneng Loji Kebun, amarga yasan loji kasebut ing palataran ngarep lan mburiné kebak tetuwuhan lan suket-suketan.