整个离宫分成上、中、下3个独立的御茶屋，现有面积超过10万平方米。其中上、下两屋是依据后水尾天皇本人的构思而进行设计的，天皇精心挑选了这块视野开阔、水源丰富的土地，因地而制宜。

上御茶屋是一座回游式庭院，由建在山腰的堤坝将山溪截流，形成名为浴龙池的大水池。堤坝由4段石墙垒砌而成，上面种植山茶、杜鹃花等70多种混植而成的剪定灌木，巧妙覆盖住了大坝。水池中有三岛，其中最大的岛上建有穷邃亭，为园林初创期留下的唯一建筑。水池曾用于舟游。水池东南岸最高处建有邻云亭，是极目远眺之地，京都的市区街巷和连绵的北山可以尽收眼底。

中御茶屋兴建于1668年，是后水尾天皇的第八皇女朱宫光子内亲王（Ake-no-miya Teruko Naishinnō，1634～1727）的住所，于1885年作为宫内省管辖的建筑并入离宫。最初的建筑只有乐只轩和其附属房屋。整个庭园不大，乐只轩正南面建有一个大水池，自客殿东南面引来的音羽川的细流，经客殿正面向西边的水池缓缓流淌而去。

下御茶屋以作为后水尾天皇外出时休息场所的寿月观为中心，从东中央东门旁引流，在寿月观的东侧形成了一个小型瀑布，并向西南角的水池流去。茶屋内悬挂的袖形灯笼与朝鲜灯笼非常有名。下御茶屋与上御茶屋之间有小路连接，两侧皆是水田，极富田园意趣。