En 1311, Robert akiris permeson por crenellate de Edward II por fortigi la domegon, kaj la pli modesta pli frua konstruaĵo estis konvertita en kastelo inter 1311 kaj 1322. Loka tradicio diras ke la ŝtono estis akirita de ŝtonminejo en la loko de kio nun estas Melbourne Pool. La rekordoj montras ke £1,313 estis elspezita por la projekto en la jaro 1313-114 el kiuj £548 estis pagita al masonistoj por vestado de ŝtono.
la loka subtera roko, Millstone Grit