Í mörg ár var hann talinn líklegur eftirmaður Khrushchev en jafnvel áður en leiðbeinandi hans var fjarlægður úr embætti hafði staða Kozlov verið undirhöfuð af áhrifum áfengis hans; vorið 1963 var hann skipt út fyrir Leonid Brezhnev sem ritari miðstjórnar kommúnistaflokksins. Á þeim tíma sem Kozlov var fjarlægður hafði hann þegar fengið heilablóðfall og lést fljótlega eftir að hann var fjarlægður úr embætti. Hann var talinn ábyrgur fyrir fjöldamorđunum í Novocherkassk í júní 1962.
Ég veit ūađ ekki.