北朝・暦応五年(1342)のこと、頼遠と二階堂行春は比叡馬場での弓射会において大いに酒を飲んだ。路に光厳帝の伏見殿より還るに遇えり。夜、帰邸の途中で、光厳上皇が伏見院からお戻りになる牛車に出くわした。の警を称するを聞きて、下馬して伏せり。先駆けの侍の警蹕の声を聞いて、そのどなたであるかを知ってすぐ下馬し、道ばたに平伏して避けた。被りて大罵して曰く、「今時に我をして路を避けしむる者は誰ぞ」と。「いまどきこのわしに道を避けさせようなどという、そいつは誰なんだあ?」と。