Jis galiausiai neteko savo titulo 1985 m. Garry Kasparovui, kurio agresyvus taktinis stilius buvo visiškai priešingas Karpovui poziciniam stiliui. Jie abu kovojo penkis neįtikėtinai glaudžius pasaulio čempionatų varžybas, 1984 m. Pasaulio šachmatų čempionatą (kontroversiškai baigėsi be rezultato, o Karpovas pirmavo +5 −3 = 40), 1985 m. Pasaulio šachmatų čempionatą (kurioje Kasparovas laimėjo titulą, 13<unk>11), 1986 m. Pasaulio šachmatų čempionatą.
1987 m. Pasaulio šachmatų čempionatas (suvaržytas 12 <unk> 12, Kasparovas išlaikė titulą) ir 1990 m. Pasaulio šachmatų čempionatas (dar kartą suvaržytas Kasparovas, 121⁄2 <unk> 11 1⁄2).