In 1919 Ezra resigned from public life because of a gambling scandal involving his brother, Judah, who had paid the favourite team to lose in a baseball tournament in 1918.
בשנת 1919 עזב עזרא את החיים הציבוריים בגלל שערוריית הימורים של אחיו יהודה, ששילם לקבוצת בייסבול על מנת שתפסיד בטורניר ב-1918.