退思园延续了苏州园林的风格。此园内涵深厚，若无导游，或一个非常熟悉的当地人解释给你听，那么你将是一团雾水。退思园的建筑非常完美，亭台楼阁轩榭坊，全部融合在一个只有9亩8分的小园林中。退思园的精髓在于园主人的性格也融在其中。个中奥妙，太待自己去发掘。什么卧虎藏龙，尽忠报国，船到桥头，留人留心。如果你细细的体会那会非常有意思。除去退思园的景点外，三桥似乎更能代表同里。
退思园因地形所限，更因园主不愿露富，建筑格局突破常规，改纵向为横向，自西向东，西为宅，中为庭，东为园。
退思园宅分外宅、内宅。
外宅有轿厅、花厅、正厅三进。轿厅、花厅为一般接客停轿所用。遇婚嫁喜事、祭祖典礼或贵宾来临之时，则开正厅，以示隆重。正厅两侧原有“钦赐内阁学士”、“凤颍六泗兵备道”、“肃静”、“回避”四块执事牌，重门洞开，庄重肃穆，令人望而却步。
内宅是园主居住及藏宝重地，因此内宅两侧石库门均用清水方砖砌成，以防火防盗。砖木结构的封火门，据说在同里的明清建筑中，仅此两扇尚属原物，其余都为近世复制。