灵顺寺位于杭州北高峰山巅，寺庙创建于东晋咸和年间，是杭州最早的名刹。北宋年间，因寺庙内供奉“五显财神”而被称为“财神庙”。明代因设殿别名“华光”，故又称“华光庙”。

灵顺寺内有高峰塔，塔身七层，据传唐天宝年间由山顶灵顺寺僧人子捷所建。塔建于北高峰最高处的马坞，其后毁，钱王修复。宋咸淳七年又毁，早已不存。北高峰塔，史上曾有很多名人在此游历并且留下著名诗篇。

苏轼在《游灵隐高峰塔》中写道：“言游高峰塔，蓐食始野装。火云秋未衰，及此初旦凉。雾霏岩谷暗，日出草木香。嘉我同来人，又便云水乡。相劝小举足,前路高且长。古松攀龙蛇，怪石坐牛羊。渐闻钟磬音，飞鸟皆下翔。入门空无有，云海浩茫茫。惟见聋道人，老病时绝粮。问年灵顺寺笑不答，但指穴梨床。心知不复来，欲归更彷徨。赠别留匹布，今岁天早霜。”宋王安石写有：“飞来峰上千寻塔，闻说鸡鸣见日升；不畏浮云遮望眼，只缘身在最高层。”宋杨万里又将南高峰塔对比北高峰塔并题诗一首：“南北高峰巧避人，旋生云雾半腰横。纵然遮得青天面，玉塔双尖分外明。