渚に立岩が孤立する秋谷海岸は、昔から風景の美しいところとして知られ、江戸時代の風景画家として有名な安藤広重もこの海岸をおとずれ、風景画を描いています。そのころ、この近くには二軒の旅籠（旅人宿）がありました。

明治２７年に葉山に御用邸ができますと、この辺りは風景が美しいところから、英昭皇太后のお気に入りの場所となり、そこには茶寮が設けられました。このお茶寮には大正天皇、昭和天皇もお休みになったことがありました。現在は立石公園となっています。