高宗還是康王時，遇到道士徐神翁過，非常尊敬、禮遇他，
徐臨別時，送給康王一首詩「牡蠣灘頭一艇橫，夕陽西去待潮生。
與君不負登臨約，同上金鼇背上行。」
康王完全不知道涵意為何。
之後徽宗、欽宗被金人俘虜，高宗單身南逃、登基，
到建炎四年 (1130) 正月初三，逃到海上躲避金兵，
船隊開到章安鎮 (台州)，海灘水太淺而停船，暫時下錨在福濟寺前等升潮，
高宗問船夫「這海灘叫什麼名字？」
船夫「牡蠣灘。」
望見岸邊山上有高聳閣樓，問當地人說「那是什麼山？」
回答「金鼇山。」
高宗因此上岸並上山，進到閣樓裏，
看到徐在牆壁上用大字寫了以前那首詩，而且墨跡還很新，
因此相信徐能預知未來事，已修煉成仙了。