飞来石位于观音阁东侧，是一块巨大的灵石，耸立在山崖上。相传，它是弥勒菩萨的乾坤如意袋所化现。弥勒菩萨住在兜率天内，不动本际，应现十方，若凡若圣，不可限量。他是释迦牟尼佛在众弟子中精选的接班人。在我国五代时期有个布袋和尚，就是弥勒菩萨的化身。他整日随身携带一个布袋，就是乾坤如意袋。这乾坤如意袋善知弥勒，通灵众生，包容万物，随心化现。当弥勒菩萨化现在喇嘛山时，它就化作飞来石，伴随弥勒来到了喇嘛山上。