En 1529 se comenzó a trabajar en una torre y apartamentos reales para James y su esposa, María de Guisa, que ahora constituyen la sección occidental y la torre del palacio actual.
Los antiguos aposentos reales han sido destruidos durante mucho tiempo.