Manuelin kuolema 24. syyskuuta 1180 jätti hänen 11-vuotiaan poikansa Alexios II Komnenoksen valtaistuimelle. Alexios oli erittäin epäpätevä virassaan, ja hänen äitinsä Maria Antiokiasta oli frangialainen tausta, mikä teki hänen sijaisyydestään epäsuositun. Lopulta Andronikos I Komnenos, Alexios I:n pojanpoika, aloitti kapinan nuorempaa sukulaistaan vastaan ja onnistui kukistamaan hänet väkivaltaisella "vallankaappauksella". Käyttämällä hyväkseen kauneuttaan ja suurta suosiotaan armeijassa hän marssi Konstantinopoliin elokuussa 1182 ja yllytti latinoiden verilöylyyn.
- Mitä? Kun hän oli eliminoinut mahdolliset kilpailijansa, hän kruunasi itsensä keisariksi syyskuussa 1183. Hän eliminoi Alexios II:n ja otti hänen 12-vuotiaan vaimonsa Agnesin itselleen.