アマのリングで戦う気力はなかった。1968年メキシコ五輪の銅メダルを最後に日本のアマボクシングは低迷していた。先代会長は「金を稼ぎたい」というまな弟子に「借金をさせてやる」とまで言ってアマ続行を強いた。丈一郎はかたくなだった。最後は「ジムをやめる」と言って飛び出した。会長を引き継いだ次男の寛は振り返る。「おやじは辰吉にいつも『五輪でメダルを獲ってからプロや』と言っていたが、本人は『すぐプロになりたい』と聞かなかった。