Kamilisha sentensi ifuatayo: Akiwa na cheo hicho, mnamo Julai-Agosti 803, Qasim aliongoza uvamizi katika Asia Ndogo ya Byzantium. Alizingira ngome ya kimkakati ya Koron, wakati Luteni wake al-'Abbas ibn Ja'far ibn Muhammad ibn al-Ash'ath alitumwa kuzingira ngome nyingine, inayojulikana kwa Waarabu kama Sinan. Hata hivyo, Wabyzantium waliahidi kuwaachilia huru wafungwa Waislamu 320 ikiwa angeondoka, naye akakubali. Mnamo Februari 808, Harun alipoondoka Raqqa kwa safari yake ya pili kwenda Khurasan, alimwacha Qasim nyuma kama naibu wake huko Raqqa, na Khuzayma ibn Khazim kama mshauri wake. Baada ya kifo cha Harun na kutawazwa kwa al-Amin mwaka 809, Qasim alithibitishwa katika nafasi yake kama gavana wa "al-'Awasim" na wa "jund Qinnasrin", lakini inaonekana aliondolewa kutoka kwa gavana wake wa Jazira (Upper Mesopotamia), ambapo Khuzayma ibn Khazim aliteuliwa badala yake. Mwishowe, mnamo 810, Qasim aliondolewa na Amin kutoka kwa magavana wake wote kwa niaba ya Khuzayma, na akaletwa kuishi chini ya usimamizi wa karibu huko Baghdad. Muda mfupi baada ya hapo Amin alizuia kutajwa kwake katika sala, pamoja na Abdallah al-Ma'mun, ambaye alikuwa ameinuka karibu na uasi huko Khurasan. Katika
vita vya wenyewe kwa wenyewe vilivyofuata, Ma'mun alishinda, akishinda na kumuua ndugu yake Amin mwaka 813. Mara baada ya hapo, Qasim aliondolewa rasmi katika nafasi yake kama mrithi.