徽州村落选址，尤为重视其山、水和方位。理想的选址模式要求山环水抱，负阴抱阳，背山面水。风水著作《丹经口诀》中所指出的风水选址模式，在徽州众多村落中得到了很好的体现，这就是所谓“阳宅须教择地形，背山面水称人心，山有来龙昂秀发。水须围抱作环行。明堂宽大斯为福，水口收藏积万金。关煞二方无障碍，光明正大旺门庭”。
       从宗谱记述可以得知，西递村以阳尖山为背依之山，罗峰为朝拱之山，北面是石狮山盘绕，南面是天马山横亘。三条大小不等的溪水缓缓穿行其中，在村西两山夹峙处是锁关的水口，村落就建在中间宽阔的三阳之地，从而构成一个典型的山环水抱之福地。这种相对封闭却衣食富足的山间盆地，既避免了外界的战乱和干扰，也为胡氏家族的生存与繁衍提供了绝好的自然环境。
西递人为了表达家族兴旺发达的美好意愿，借助于风水的知识体系，将所处的环境赋予特有的文化意念和人文期待。比如宗谱中记述，霭峰是西递村的主峰，形似毛笔，故称“文笔峰”，主乡村文运昌盛，成为胡氏家族兴旺发达的希望所在。村子两侧有许多小山丘，风水学中称之为“砂”，具有单尖形状的砂被称之为“文峰”，三峰相连的砂被称之为“笔架山”，都被用来喻示兴文运。有笔还须有墨水，西递人为此在村内挖了两口大水塘，一口为村民饮水和浣洗之用，一口用以象征盛墨的砚池。村边的文峰、笔架山都能倒映在池塘中，似笔蘸墨。水塘边摆放着一些石条，以象征墨条，这些石条采用的是黟县盛产的黟县青(全称黟县青大理石)，因为“黟“字就由“黑”和“多”组成，本身就是墨。所以，村落环境就具有了出人才的基木条件，笔、墨、砚。