據《
佛祖通載》描寫:“神僧杯渡，初出
冀州，如清狂者，挈一木杯，渡水必乘之，因號焉。”《高僧傳·卷第十·神異下·杯度八》記載有一人，有神力。當時的人不知他的姓名，但因他常以木杯放水中泛行渡海，故此稱其為杯度。最後在
元嘉(五年三月初八，杯度見過一些
佛教信徒后，自稱：“貧道當向交廣之間不復來也。”
云云。當時的交廣地區相當於現在的廣東省、廣西省和
越南北部。
相傳他後來來到香港屯門修道，在
青山的一個大山岩中居住。因而，此山被名為“杯渡山”，他的門徒在岩前築一茅屋作“杯渡庵”，后稱“青山古寺”至民國初年改建成“
青山禪院”。