香山寺位于永寿县城关化纤市场南边，原建年代不详，但据历史记载，清代同治元年回民起义时，永寿县令许络在各镇堡设立民团抵抗回民军队，监军镇的民团就设在香山寺。光绪十年，因回民起义中杀戮过多，政府重修香山寺慰藉亡灵。民国十九年，永寿县治迁至香山寺。解放后，寺庙建筑逐渐损毁，但佛事活动未曾间断。2003年，来自甘肃天水的民间木匠李瑞林重新设计修建了这里，寺院建筑为仿唐式，上下两层，门窗上刻有龙纹，柱间有金龙环绕。檐角挂风铃。屋顶为单檐歇山式。院内供有释迦佛像与西方三圣像。院内有比丘尼与老年居士数名，修习净土法门。