公元502年的时候，印度有一个很出名的法师叫智藥三藏法师，受邀来中国弘法的时候呢，专门到当年佛陀开悟的菩提下，移了两棵菩提树苗，作为信物带来中国，结果遇到了台风，没在广州上岸，飘到了广海灵湖这个位置，他一上岸就种了这棵菩提树，建了一个灵湖的前身，这棵树很大，要7个人抱，也是我见到最大的一棵菩提树，种完这棵树之后，他就小住了一段时间，去了广州的光孝寺.智藥三藏法师是印度著名高僧，甘冒千里之远，来我国传授佛经，中国的菩提树随之传播开来。除此之外，智藥三藏还建立了南华寺，并预言说一百七十年后，有肉身菩萨至此地演化得道，因其成功地预言了六祖慧能于当年来南华寺大弘教化而广为佛徒所知。
在此机缘之下，广海也因智藥三藏的停留而才有灵湖古寺，菩提树也因此而在广海枝繁叶茂延续至今。灵湖寺过去在广海城城东，这一片叫莲花洋，你看，对岸有上川岛，这里，我们叫龙回头，风水上叫青龙山，也就是现在的莲花山，那里叫虎头山，过去是大山，两个山包在一起，我们这个山叫象山，叫莲花抱蕾，前面的竹林，用我们话说叫朱雀案山供养，前面有个很大的礁石，现在看不到，平时天气好的时候，可以看见一个大的礁石，正好对着我们的前面，两山一夹，自然形成了沙堤，沙堤以外，出了莲花洋就是大海，里面到这边是灵湖，五几年没有粮食吃的时候，把它围湖造田了，不过，不时下大雨，台风来的时候，水慢慢聚集，成了一个湖，以沙堤为界，里面称灵湖，外面是大海，现在基本看不到了，填海造田了，所以灵湖这么来的。
“先有灵湖，后有鼎湖”，“广海城东莲花洋，大象驮小象，代代出和尚”。关于灵湖古寺，自建起后，民间就多有语句提及。在广东珠三角文化氛围中，烧香拜佛，祈福添寿的人不少，但真正出家的人不多,最后一位老和尚继慈法师.
