据说灵山岛源于三亿多年前的白垩纪时期的造山运动。是由于底壳运动，受动荡，褶皱和断裂影响造成灵山岛。

灵山岛共有山峰五十余座，群峰高耸入云，山崖陡峭难攀。主峰歪头顶海拔五百一十六米有余，岛上四面环水，绿树成荫，山花烂漫，云雾缥缈。是到灵山岛游玩的人们不免产生了刘恋忘反的意念。二十世纪三十年代的现代作家萧军就在一次畅游灵山岛的时候写下了，水灵山岛的文章。

灵山岛更有很多的美丽故事和传说。据说灵山岛上的的背来石，是有东海龙宫海龙王的女儿水灵姑娘在龙宫里背来的。因为海龙王的女儿水灵姑娘，在一次偶然的机会来到了灵山岛，被灵山岛的山水美景所吸引，来到灵山岛后就不想再回东海龙宫了。于是水灵姑娘就从东海龙宫偷偷的背来一块千年灵石，与己为伴，并产生了再次定居的理念，并在此居住了下来。谁知东海龙王发现后，就像现在的枪拆一样的，派人组团强行把水灵姑娘抓回了东海龙宫。因此这块千年灵石就被孤孤单单留在了岛上。