文久3年（1863年）の絵図には、「新御殿」と記されています。高床式構造の建物のため、少し高い目線で茶畑越しに園内の西側を眺めることができます。