付近には、広島藩浅野家の屋敷がありました。元禄十年(1697年)には、幕府旗本の屋敷となり、この公園の土地も旗本の屋敷の一部になりました。明治2年(1869年)、赤坂氷川町が誕生しました。(1878年)の郡区町村編成法により、この地区は東京15区の一つ赤坂区の一部となりました。港区が誕生した1947年、旧赤坂区の町名にはすべて「赤坂」を冠とした町名変更が行われました。この「赤坂」を冠とする町名は、住居表示実施までつづきました。赤坂一丁目から赤坂九丁目が、誕生しました。これにより、この地に古くからつづいた町名が失われることになりました。現在も、この町名で住所が記されています。10年経ったばかりで、まだまだ町内会の方々から見れば‘新参者’と言ったかんじです。