一種說法認定是寺院開山鼻祖給取的名。慧理祖師是印度人，東晉咸和年間來到今杭州，見此峰嘆息說：“它是天竺靈鷲峰小嶺，不知什么時候飛來的?！比藗兌疾恍牛劾碜鎺熣f：“這座山峰一直有黑白二猿在洞中修行，一定跟隨到了這里。”

慧理于是在洞口呼喚二猿，沒想到二猿真的立即出來了。因為該峰從天竺飛來，所以慧祖就將這座山命名為飛來峰，也稱靈鷲峰。這件事說明靈隱道場咫尺西天，與佛教發(fā)源地具有十分密切的關系，也似乎是靈隱寺經久不衰、法源悠遠的因緣所在?，F在，人們來到靈隱寺前，照壁上“咫尺西天”四個大字便映入眼簾，仿佛在重提那段頗有傳奇色彩的往事。

另一種說法卻和濟公和尚有關。相傳有一天，靈隱寺的濟公和尚突然心血來潮，算知有一座山峰就要從遠處飛來。那時，靈隱寺前是個村莊，濟公怕飛來的山峰壓死人，就奔進村里勸大家趕快離開。村里人因平時看慣濟公瘋瘋癲癲，愛捉弄人，以為這次又是尋大家的開心，因此誰也沒有聽他的話。

眼看山峰就要飛來，濟公急了，就沖進一戶娶新娘的人家，背起正在拜堂的新娘子就跑。村人見和尚搶新娘，就都呼喊著追了出來。人們正追著，忽聽風聲呼呼，天昏地暗，“轟隆”一聲，一座山峰飛降靈隱寺前，壓沒了整個村莊。

這時，人們才明白濟公搶新娘是為了拯救大家，于是就把這座山峰稱為“飛來峰”。游飛來峰時，你會看到此山無石不奇，無樹不古，無洞不幽，秀麗絕倫，其景觀與周圍諸峰迥異，于是你很自然會產生一個奇怪的想法：莫非此峰真是從別處飛來？