绮望楼在丽正门西边，榛子峪南面的山冈上，紧依避暑山庄宫墙而建，门外建有称为"月牙城"的瓮城，门殿之北有面南的正殿九楹，上下两层，北向，乾隆帝御题"绮望楼"，意为眺望绮丽风景的楼。楼外有东西配房，中间院落内山石重叠，苍松挺拔。登临此楼，可北眺连绵的山峦，东览山庄内湖光山色，南望黄昏时城区的袅袅炊烟，万家灯火。