Schrijf een voortzetting voor deze paragraaf - Paus Leo maakte hem kardinaal priester van Sant'Eusebio in het consistorium van 18 juni 1899. Na deelname aan het pauselijk conclaaf van 1903 werd Richelmys kardinaalkerk op 27 november 1911 overgeplaatst naar Santa Maria in Via. Hij was een van de kardinaal-kiesers in het conclaaf van 1914.
, en ook in die van 1922, die respectievelijk paus Benedictus XV en paus Pius XI koos. In 1915, toen Italië de Eerste Wereldoorlog ingaat, organiseerde Richelmy priesters voor dienst als legerkapellen in de bergen van Trentino, waar zij altaren uit sneeuw houten en in temperaturen onder nul massa's hielden.