Jis galiausiai neteko savo titulo 1985 m. Garry Kasparovui, kurio agresyvus taktinis stilius buvo visiškai priešingas Karpovui poziciniam stiliui. Jie abu kovojo penkis neįtikėtinai glaudžius pasaulio čempionato rungtynes, 1984 m. Pasaulio šachmatų čempionatą (kontroversiškai baigėsi be rezultato, o Karpovas pirmavo +5 −3 = 40), 1985 m. Pasaulio šachmatų čempionatą.
1986 m. Pasaulio šachmatų čempionatas (sumažinai laimėjo Kasparovas, 121⁄2<unk>111⁄2), 1987 m. Pasaulio šachmatų čempionatas (sužaista 12<unk>12, Kasparovas išlaikė titulą) ir 1990 m. Pasaulio šachmatų čempionatas (dar kartą smulkiai laimėjo Kasparovas, 121⁄2<unk>111⁄2).