Depois de tentar ingressar na corte real, não se sentindo bem recebido, retirou-se para a posse de Torrejón de Velasco, o que não foi obstáculo para que seu domínio sobre Alba de Tormes fosse confirmado em 18 de setembro de 1434, bem como fosse respaldado na sua pretensão de se tornar arcebispo de Sevilha contra as aspirações de Pedro de Castilla de Eril, bispo de Osma e tio do rei, obtendo a nomeação pontifícia pela bula de 15 de maio de 1439.