退思园，建于清光绪十一年至十三年（公元1885-1887年）。光绪十年（公元1884年），内阁学士周德润勋任兰生盘踞利津、营私肥已。光绪十一年（公元1885年）正月，解任候处分，旋因查所勋都不实，部议革职位。任兰生落职回乡，花十万两银子建造宅园，取名“退思”。其弟任艾生哭兄诗有“题取退思期补过，平泉草木漫同看”之句，可见园名取《左传》“进思尽忠，退思补过”之意。退思园的设计者袁龙，字东篱，诗文书画皆通。他根据江南水乡特点，因地制宜，精巧构思，历时两年建成此园。园占地仅九亩八分，既简朴无华，又素静淡雅，具晚清江南园林建筑风格。退思园布局独特，亭、台、楼、阁、廊、坊、桥、榭、厅、堂、房、轩一应俱全，并以池为中心，诸建筑如浮水上。格局紧凑自然，结合植物配置，点缀四时景色，给人以清澈、幽静、明朗之感。退思园因地形所限，更因园主不愿露富，建筑格局突破常规，改纵向为横向，自西向东，西为宅，中为庭，东为园。宅分外宅、内宅，外宅有轿厅、花厅、正厅三进。轿厅、花厅为一般接客停轿所用。遇婚嫁喜事、祭祖典礼或贵宾来临之时，则开正厅，以示隆重。正厅两侧原有“钦赐内阁学士”、“凤颍六

内宅建有十楼十底南北两幢楼，以园主字号名为畹芗楼，是园主与家眷起居之处。楼与楼之间由“走马楼”回廊贯通，南北一式落地长窗，五楼屋底挂落栏槛，檐廊相接，典雅明敞。复廊东西两侧各设楼梯，雨天不走水路，晴天又可遮阳，又为主仆上下时避让。畹芗楼下另设下房数间，供侍者居用。内宅为园主居住及藏宝重地，因此内宅两侧石库门均用清水方砖砌成，以防火防盗。砖木结构的封火门，据说在同里的明清建筑中，仅此两扇尚属原物，其馀都为近世复制。
　　中庭是西宅到东园的过渡。放眼庭中，樟叶如盖，古兰飘香，清雅幽邃，有引人入胜之妙。

庭中旱船，前舱八扇长窗如锦屏障目，隔而不断，船头面对“云烟锁钥”月洞门，船身相接漏窗暗廊，隐去船尾，俨然一艘待航的客船。旱船又与南北两侧的坐春望月楼、揽胜阁、迎宾居、岁寒居等厅楼建筑相形错落，平添美感。江南古典园林中，石船、石舫极其多见，从中略可窥见水乡人家对水、对船，有着特殊的依恋情结。登上坐春望月楼可四季望月，吟诗酬唱，也可楼前踏月，静赏花木。楼之东侧一隅为揽胜阁。