1159年,三年後,ヨシトモと藤原ノブユヨリは,高島川を自宅拘禁にし,彼の従軍者,学者藤原ノミチノリを殺害した.最終的に,高島川を支持するタイラノキヨモリは,ヨシトモを倒した.京都から逃亡する際,ヨシトモは息子トモナガを殺すように強制された.後に,ヨシトモは裏切られ,彼の浴室で殺された.彼の息子の3人,ヨシトモ,ミノリトノヨシュネ,ミノリトノノノリヨリは,後にキヨモに救われ,追放された.しかし,ヨシトモと藤原ノブユヨリは処刑された.彼の墓は,アイヒラ郡で,木製の剣 (ボクトボク) で四方から囲まれている.彼の最後の言葉として",もし私がボクトボクを持っていたとしても"は,ボクトボクの最後の言葉である.
木製の剣