明治32年に造営され、明治・大正・昭和の3代にわたる天皇や皇太子が利用した旧御用邸の建物と庭園を整備した公園である。現存する本邸は、江戸時代後期、明治、大正の3時代の建築様式をもつ木造集合建築群で、国の重要文化財に指定されている。

園内では106室に及ぶ本邸の部屋群や展示を見学できるほか、四季折々の草花が彩る庭園を散策できる。