水训》中：自近山而望远山，谓之平远之意而命名。

咸丰年间楼毁于兵火，同治年间两淮盐运使方浚颐重建，增题“平远楼”额，并撰联云：“两点金焦，助起杯中吟兴；双峰今耸秀，万株松栝，涌来槛外涛声。”联语造句雄浑，写楼外风景极为切当。

平远楼共三层，构筑致，有庭院竹石之胜，现为方丈室。平远楼北为晴空阁，现为鉴真事迹陈列室。

颜沉鱼和考拉进楼前庭院，院内这块横匾上刻着“印心石屋”四宇，这是道光皇帝为嘉庆年间进士陶澍而题。

陶澍居住在庭湖畔，因他家门潭水中有块石，方正如印，名叫“印心石”，陶澍从小跟随父亲读书，书斋就在“印心石”北岸，故名“印心石屋”。

印心石屋旁边这株枝繁叶茂的名贵花木就是扬州花——琼花，树龄已超过300年，是扬州最古、最大的一株琼花。