Menulis kelanjutan untuk paragraf ini - Dibesarkan dalam keluarga veteran militer, Passy menggambarkan dalam otobiografinya bagaimana dia "mungkin dengan mudah tertarik pada militerisme". Sebaliknya, cerita tentang kengerian penaklukan Perancis dari Aljazair
mendorongnya untuk mempertimbangkan efek bahwa perang telah pada umat manusia. Bertahun-tahun ketidakpuasan kekerasan di Italia, Polandia, dan Austria dan Prusia menyebabkan seruan untuk federasi Eropa dari kaum liberal dan sosialis terkemuka: Pierre-Joseph Proudhon, Émile de Girardin, Passy, dan Michel Chevalier semuanya adalah pendukung ide ini. Pada tahun 1859, Passy mengutuk gagasan bahwa aksi militer dapat menjadi solusi untuk masalah politik, dan menyarankan bahwa Eropa harus memiliki "kongres permanen untuk mengawasi kepentingan umum umat manusia" dan pasukan polisi internasional.