灵隐寺为驿马山国家森林公园的核心景点，寺庙占地超10万平方米，位于驿马山主峰东北面，整座寺庙坐北朝南，从南至北依次布有寺门、大雄宝殿、三圣殿、藏经阁等；进入寺门左右各设一座钟鼓楼，寺院内东侧布设送子观音殿、罗汉堂和塔林；西侧布设斋院、居士生活区、舍俐塔和比丘塔。在灵隐寺北端的五座形似坐佛山峰的中部布建一座13级浮图，总计23座建筑物，现均已建成。