Fejezd be a következő mondatot: Joel akkor találta ki a dal ötleteit, amikor éppen 40 éves volt. Egy lemezstúdióban találkozott Sean Lennon 21 éves barátjával, aki azt mondta: "Rossz időkben lehetsz 21 éves!" Joel így válaszolt: "Igen, emlékszem, amikor 21 éves voltam, azt hittem, szörnyű idők voltak, és volt Vietnám, és tudod, drogproblémák, és polgári jogok problémák, és minden szörnyűnek tűnt". A barátja így válaszolt: "Igen, igen, igen, de neked más. Az ötvenes években gyerek voltál, és mindenki tudja, hogy az ötvenes években semmi sem történt". Joel visszavágott, "Várj egy percet, nem hallottál a koreai háború vagy a
Suez-csatorna-válság?" Joel később azt mondta, hogy ezek a címek képezték a dal alapkeretét. Joel szintén szigorúan zenei alapon kritizálta a dalt. 1993-ban, amikor David Horn dokumentumfilmes rendezővel beszélt róla, Joel kedvezőtlenül hasonlította a dal dallam tartalmát a "The Longest Time" dalához: "Vegyünk egy olyan dalt, mint a 'We Didn't Start the Fire'. Ez nem igazán egy dal... Ha a dallamot magára veszi, szörnyű. Mint egy fogorvos fúró".