Melbourne Castle var byggð á staðnum sem var fyrri dýragarður óþekktar dagsetningar; það er gömul hefð að dýragarðurinn var upprunalega stofnaður um árið 900, undir stjórn Alfreðs hins mikla, en það er engin sönnun fyrir þessu. Eins og skráð er í Domesday Book, var dýragarðurinn í Melbourne og lönd hans í eigu Edvards konungs fyrr en normandska landnámsins. Eignin fór síðan í hendur Vilhjálms I. Eftir að hafa stofnað Carlisle biskupsdæmið árið 1133, gaf Henry I dýragarðinn til æviloka til Æthelwold, fyrsta biskupsins. Nokkru síðar byggði biskupsdæmið í Melbourne höll á staðnum sem nú er Æthelwold.
Melbourne-höll