『のんびりと過ごしたい』と隠棲生活を望んだ本人の意思と裏腹に、大正から昭和にかけて激動する日本の政治の数々の局面でクローズアップされた舞台となった。当時の日本政界の中枢人物による興津の坐漁荘詣でが頻繁に行われたと云われる。1940年(昭和15年)に公望が亡くなった後は、西園寺家より高松宮宣仁親王に譲渡された。戦後、宣仁親王の義弟にあたる徳川慶光が一時的に居住したが、その後は再び西園寺家に戻る。建屋の老朽化が著しくなった1968年(昭和43年)に、博物館明治村への移築話が纏まり、1970年(昭和45年)に明治村での移設公開が始まった。その後、2003年(平成15年)には登録有形文化財に登録された。2012年5月23日より建物保存のため大規模工事が行われている。115番地に存在するものは2004年(平成16年)に復元されたものであり、興津坐漁荘の名称で一般に公開されている。