，因为地处山顶，开始只是个连名字都没有的破败寺庙。
后来一个游方和尚在此落脚，他靠着化缘慢慢修缮了原有的房舍，请了佛像入寺，又收了徒弟。
因为常有晚霞如落院中的美景，便给这个无名山寺起名为栖霞寺。
说来也奇怪，当时山寺周边大旱三年，百姓民不聊生，可就在山寺正式挂上栖霞寺匾额的当天夜里，天降大雨。
于是周围百姓一传十十传百，大家都来跪拜，接下来的几百年间，栖霞寺一直香火鼎盛，每天都挤满了前来求佛或是还原的信徒。
每逢初一十五也会有许多百姓披星戴月地进山烧香拜佛。
但是因为山寺地处峭壁之上，临危而立，整个庙宇只有两进的院子，根本无法容纳太多的香客。
据说上百年前有一次为了争烧头香，差点儿发生了山寺坍塌的危险，还有几位香客受伤。
当时的主持昭泰大师心善，当日在佛前静坐一夜，想出一个佛祖出巡的法子，就近选在下一个月，也就是五月初一的这日，由寺中众僧抬着殿中佛祖宝相下山出巡，让更多的信徒能够得沐佛光。
后来渐渐的，佛祖出巡就成了栖霞寺的传统，到如今已经变成每年一次的十分热闹的礼佛活动。