Fhuair an teaghlach Keith an taigh agus am fearann a-rithist, ach reic iad e 's iad sgìth dheth ann an 1696 ris an Ridire Uilleam Dunbar, Hempriggs. Ann an 1845, dh'fhastaidh an Ridire Seòras Dunbar, a bha air tiotal a' Mhorair Duffus fhaighinn, Daibhidh Bryce, a bha na ailtire à Dùn Èideann, gus an caisteal atharrachadh gu bhith na àite nas spaideile do dh'uaislean ann an Ceann a Tuath Alba.