Dum turneo de Usono en februaro 1971 kun nova klavarludanto Christine McVie nun aliĝinta al la grupo, Spencer iĝis seniluziigita kun sia vivo en Fleetwood Mac, kaj menciis en pluraj intervjuoj okazaĵon kiam la grupo aŭskultis registradon de malnova koncerto. Kiam li aŭdis sin kantantan, li diris: "Tio sonas terure. Sonas kiel fekaĵo". Laŭ unu raporto de Mick Fleetwood, Spencer ŝajne havis malfacilecon renormaliĝi post meskalina vojaĝo kiun li spertis tre frue en la usona turneo. Baldaŭ antaŭ la vojaĝo de la grupo de San-Francisko al Los-Anĝeleso, LA spertis grandan tertremon
Ĉu vi ne scias? Estante en delikata mensa stato kaj plena de fortaj negativaj antaŭsentoj, Spencer tre timis vojaĝi al Los-Anĝeleso. Li malsukcese petegis Fleetwood nuligi tiun parton de la turneo. Baldaŭ post alveno en Los-Anĝeleso la 15-an de februaro 1971, la tago de koncerto la grupo estis planita por rezulti ĉe la Whisky A Go Go, Spencer forlasis la hotelĉambron kiun li dividis kun Fleetwood por viziti librovendejon sur Hollywood Boulevard. Li ne revenis, devigante la nuligon de la koncerto de tiu vespero dum la grupo kaj membroj de ilia akompanantaro iris por serĉi lin. Kelkajn tagojn poste, oni malkovris ke li aliĝis al la religia sekto la Infanoj de Dio, kaj li deklaris ke li ne plu volis esti implikita kun Fleetwood Mac. Malgraŭ apelacioj de la manaĝero de la grupo, Clifford Davis, por plenumi siajn devontigojn al Fleetwood Mac, Spencer ne povis esti persvadita por reveni al la grupo kaj ili devis lukti sen li, unue revokante Peter Green el emerĝejo kiel kriziniciato, kaj poste rekrutante novan gitariston Bob Welch.