Na konci května 2004 Lieberman představil Liebermanův plán, v němž navrhl, že obyvatelstvo a území izraelských Židů a Arabů, včetně některých arabských občanů Izraele, budou "odděleny". Podle tohoto plánu, známého také jako "Plan výměny obydlených oblastí", by arabská města v Izraeli sousedící s oblastmi Palestinské samosprávy byla přenesena na Palestinskou samosprávu a pouze ti arabští Izraelci, kteří se přestěhovali z této oblasti do nových hranic Izraele a přísahali věrnost Izraeli, by mohli zůstat izraelskými občany. Dne 30. května 2004 premiér Ariel Šaron odsoudil Liebermanova prohlášení a prohlásil: "Považujeme izraelské Araby za součást státu Izrael". Dne 4. června 2004 se jakožto důsledek sporů ohledně nadcházejícího plánu
Sharon odvolal Liebermana z vlády.