पार्टी ने भारत अमेरिका असैन्य परमाणु समझौते के विरोध में यूपीए 1 सरकार से अपना समर्थन वापस ले लिया था और चटर्जी को भी लोकसभा अध्यक्ष पद से इस्तीफा देने के लिए कहा था, जिसे चटर्जी ने नकार दिया था और उसके बाद पार्टी ने उन्हें निष्कासित कर दिया था।