Dokonči nasledujúcu vetu: V roku 1984 Ruthven začal znižovať svoju účinnosť. Začal sezónu ako začiatočník pre Cubs, ktorý vyhral 3. apríla proti San Francisco Giants. Aj keď Cubs vyhrali divíziu s 96 víťazstvami, Ruthven vyhral len šesť zápasov proti desiatim porážkam, ktoré sa zhromaždili v 23 zápasoch (22 začiatok). Jeho priemer ziskov sa tiež zvýšil na 5,04. Bol to jeho najnižší zisk od roku 1975. Ruthven sa nezjavil v
1984 National League Championship Series, ktorú Cubs prehrali v piatich zápasoch proti San Diego Padres.