Nacido en Melbourne, Canadá Oriental, fillo de Udolphus Aylmer, 7o Barón Aylmer e Mary Journeaux, Aylmer foi educado no Liceo de Montreal e no Royal Naval College en Portsmouth, Inglaterra. Serviu na milicia canadense durante as incursións fenianas.
e foi tenente na Artillería Real da Mariña. Organizou a Batería de Campo de Richmond en 1876 e ocupou o mando ata novembro de 1887, cando se aposentou co rango de tenente coronel.