グラハムは1857年に,中国当局がロルチャを押収した後に,カンタンに砲撃したときに,パーマーストンの砲艦外交に反対した.
矢を撃った この決定の不人気にもかかわらず,彼はカーライルの選挙で復帰した. しかし,Peeliteの党は,すべての意図に,それはもはやなかった. 彼は1859年にカーライルに再び出馬し,甥との共同選挙は一般的な傾向に反し,2人のリベラル候補者を返した. その年の後半,グラハムとローソンを含む 280人の同志のグループがウィリスの部屋で集まり,リベラル党を設立した. イギリスの政治には二党制が復活した.