相传，秦始皇做了皇帝交关怕死，到处寻求长生不老之药，好让他永生永世做皇帝。秦始皇身边有个方士，名叫徐福。这人一只嘴巴交关灵光，老老在秦始皇面前讲大话。有一次，他对秦始皇讲：海上有座蓬莱山，是神仙住的地方，山上有长生不老之药，只要给他一千个童男童女，他就能够把仙药寻回来。秦始皇听了蛮相信，便命徐福带上童男童女，前往蓬莱仙岛寻求长生不老药。
这日，徐福的船队路过舟山洋面，突然刮起风暴，海上的浪头，像小山一样，一个接一个向船队扑来，把船打得东倒西歪团团转，迷失了方向，随浪飘到一个无名小岛前。徐福站在舱板上一看，只见这个小岛树木茂盛，风景如画，好像一块仙岛。徐福心忖，现在船只损坏，淡水用尽，正好在这里修船充水，歇上几天，再作道理。他主意一定，便叫船队沙沙落了风篷，抛了锚，靠了岸。他们踏上小岛，发现山坳里还搭着茅棚，里面住着一个长须老头。老头见有客来，蛮高兴，连忙搬凳倒茶，又拿出烤熟晒干的乌贼鲞、黄鱼鲞、淡菜干招待客人。喝了老头的茶，吃了老头的海味，童男童女个个有了精神，大家就在岛上搭起了帐篷，伐木的伐木，修船的修船，长胡须老头还带着他们到山上去挖井找水。小岛上一下子来了介多人，闹热猛了。
几日以后，船修好了，柴爿劈足了，淡水也充够了，按理说好开船了 ，可开船总要有方向呀！前几日，被风暴刮得呒头呒绪，现在连这个小岛叫啥名字也勿晓得，在啥地方也弄勿灵清，船咋开开？还有，这几日，好多童男童女受了岛上蚊虫叮咬，忽冷忽热，浑身无力，生了冷热病，船上的药又治不好。徐福心事担煞，困也困勿着，半夜爬起，不想在帐篷门口看见一大把草药，拿来给病人一吃，没二日，病都好了。徐福忖，这岛上只有老头一人，他帮助我找到了淡水，又送来了草药，是个好人，更是个奇人，何不再去向他请教行船的水路哪？来到老头茅棚，说明来意，老头告诉徐福，等天气雾蒙蒙太阳出来的辰光，东边海面上常有岛影出现，朝东驶去，便是蓬莱仙岛。徐福赶忙回去，作好开船准备，第二日一早，海上天气蒙蒙等太阳出来辰光，果然看见东边海面上有一片模模糊糊的岛影，徐福辞别了老头，令船队起锚拔篷，朝东边这片岛影驶去。
后来捕鱼人看到这个小岛辟了路，挖了水井，好住人了，就三三两两在岛上搭起茅棚住下来了。因当年徐福东去路过这里，所以后人就把它取名东福山。