اكتب استمرار لهذه الفقرة - بناء القلعة تركت لبالدوين فيتز جيلبرت الذي تم تعيينه قلعي، من بين شرفات أخرى. تم بناء خندق عميق والحائط الداخلي بين أسوار المدينة الشمالية الغربية والشمالية الشرقية، مما شكّل محيطًا مربعًا تقريبًا مع جوانب تبلغ حوالي. "كتاب يوم الدين" لعام 1086 ذكر ان 48 بيت دمروا في اكستر منذ ان جاء الملك الى انكلترا. هذا تفسيره من قبل المؤرخين يعني ان هذا العدد من البيوت كانت في الموقع المخصص للقلعة. تم بناء بوابة حجرية كبيرة، والتي ما زالت موجودة، في الضفة في الجانب الجنوبي من الحاجز. فيه عناصر واضحة من العمارة الانجلو ساكسونية
، مثل الأركان الطويلة والقصيرة والنوافذ ذات الرؤوس الثلاثية المزدوجة، مما يشير إلى أنه تم بناؤه مبكرًا جدًا من قبل البنائين الإنجليزيين بناءً على أوامر النورمان. في هذه المرحلة المبكرة، كان على الأرجح فوق الحصن حصان، على الرغم من أن برجين زاويتين بُنيا قريبًا حيث التقى الحافز بجدران المدينة، والذي لا يزال موجودًا البرج الغربي منه (المعروف خطأ باسم "برج أثليستان").