退思园建于清光绪十三年(1887)，园主任兰生原任安徽兵道，回归故里后建造了这座私家花园。园名“退思”取“进思尽忠，退思补过”之意。

　　小园为横向构造，自西至东，左为宅，中为庭，右为园。内宅东侧是以主人之号命名的“畹芗楼”，楼与楼之间由双重走廊与之贯通，民间又称“走马楼”。内园庭中的“旱船”是主人迎送宾客、舞文弄墨的场所。过月洞门，九曲回廊设九扇纹饰各异的漏窗，窗中央嵌有石鼓文“清风明月不须一钱买”九字，出自李白《襄阳歌》  “清风朗月不须一钱买”。九曲回廊旁是最富动感的“闹红一舸”。迟思草堂在池北，点明了园的主题。堂南的贴水露台面临荷池。假山之巅有眠云亭，天桥北侧有老人峰，峰巅有一灵壁石，酷似长寿龟，形神兼备。退思园的每一景物既可独立成景，又是另一景的陪衬，互相呼应，相映成趣，让人百游不倦。