Por encima de la ciudad, acrose de la estación ferroviaria, son los restos del Castillo de Penrith, construido para proteger contra las redadas del norte.
El castillo del pene fue destruido en la guerra civil inglesa.