杜不忘日夜兼程骑着快马，几日后就赶到了去往蓬莱岛的海边。
却发现四周找不到一艘船只，连渔民也见不到一个，正举足无措之时，突然间走过来一个带着斗笠穿着草衣、拿着鱼竿的竹篓的渔翁。
杜不忘仔细一看，这不就是上次自己剪了他胡子，偷他行头和船只的那渔翁吗？便有些尴尬的上前与这渔翁打招呼：
“大伯，您好！”
这渔翁回了句：
“小畜生你还敢回来啊！”
然后拿着竹竿就朝杜不忘打了过来，杜不忘马上闪了一下，却发现还是被这竹竿打到了腿上，瞬间一阵生疼。
杜不忘这时心里正在怀疑，难道自己武功退步了吗？
这时渔翁便对着杜不忘大喝了一句：
“老夫留了多年的胡子居然被你给剪了，你这小畜生赶紧赔给我！”
杜不忘马上回着：
“大伯您的胡子早已不知道去向了，我如何还您呢！”
然后接着说道：
“既然如此，那大伯您在我身上找找吧，若您有看得上的东西都可拿去以作补偿您胡子的损失！”
渔翁过来打量了下杜不忘，便开始在杜不忘身上到处收了起来，不一会就把杜不忘肩上的太阿剑先拿到了手中，说了句：
“如此稀世太阿宝剑主人居然不会使用，真是可惜可惜！”
然后又从杜不忘怀里搜出藏宝图和钥匙，叹了口气说道：
“空有南朝宝藏图与宝匙尚不知去取，也真是浪费浪费！”
然后直接脱了杜不忘外衣，杜不忘赶紧阻止，说了句：
“大伯你想干嘛，我可不喜欢男人！”
老翁回了句：
“你以为我是汉哀帝刘欣有断袖之癖？”
然后把杜不忘袈裟直接脱了下来，又说了句：
“达摩祖师袈裟，老翁我穿着也不错！”
然后把这袈裟披在了身上。
杜不忘本想反抗却发现根本不是这老翁对手。
杜不忘便有些生气的问了这老翁一句：
“你到底是何人？想干什么？一个烂胡子就换我这么多宝贝？”
老翁这时说了句：
“你自己刚才答应我的，说你身上东西任我挑，难道你现在不想认账了？”
杜不忘这时才想起自己刚才失言，不禁说了句：
“算了，算我倒霉吧，我认了，反正要这些东西对我也无多大用了，当送你吧！”
然后便准备离开。
走了一段后，只听这老翁大声问了句：
“你是真的不要了？”
杜不忘回了句：
“是的！”
然后头也不回继续寻找船只。
这时突然发现海面不远处，有人划着一艘船朝岸边靠了过来，杜不忘赶紧朝这艘船跑了过来，发现这划船之人居然还是这老翁，而这船却与上次自己弄沉那群和尚的船只一模一样。
只听这老翁抢先说了句：
“小畜牲，我也拿了你这么多东西，看你应该是想去那蓬莱岛吧，我算是补偿下你吧，带你过去！”
杜不忘上船后，赶紧仔细打量起了这船只。
老翁见此笑了笑，说道：
“你不用看了，你是在担心这船会漏水吗？不用担心的，我已经把它修好了！”
老翁便开始划起船来。
杜不忘坐了一会，见老翁只划船也不理会自己，便不禁问了一句：
“船沉了难道还能捞的起来吗？”
老翁回了句：
“人走了不也迟早会回来的吗？你不也是？”
杜不忘回了句：
“我是为了一个人！”
老翁长叹一下，说道：
“我年轻与你何尝不是一样呢？”
杜不忘便问：
“大伯，您武功如此厉害，怎么还叹气呢！”
这老翁便不知不觉说了起来：
“曾经，我喜欢过一个女人，可是因为我是出家人的缘故，所以我被迫离开了她！”
杜不忘赶紧问道：
“原来您是出家人啊？”
这老翁便慢慢讲起了来。
原来这老翁三十年前本来一次从蓬莱岛来中原购买生活用品途中，在海上好心救了一遇险的女孩，经询问得知这女孩父母与父母出海捕鱼，结果遇到风暴父母已经双亡了。
老翁当时便把这女子带回了蓬莱岛，十年后，这女子慢慢长大了，居然喜欢上了老翁，老翁虽然也喜欢这女子，但想到自己是出家人，自然不愿冲破这层关系了。
没想到这女子主动几次示爱后，却都被老翁拒绝了，这女子便一气之下便偷偷离开了蓬莱岛，没想到遇上了暴风，之后被一艘扶桑前来蓬莱岛拜访老翁的船只救了下来。
而这来拜访老翁的船只的主人乃是扶桑皇室柏世亲王，柏世亲王见这中原女子姿色不错，便强行占有了他。
这女子被柏世亲王占有后，索性也想借柏世亲王之力来报复下对自己薄情寡义的老翁，便索性把岛上所以事情全部告诉了这柏世亲王。
柏世亲王知道自然兴奋，便也顺势对这女子百般讨好，俩人也商量了对付老翁的计谋。
到了蓬莱岛后，柏世亲王便假借帮老翁送回这女子自由，故意在岛上赖着不走了，这女子自然天天在老翁面前说柏世好话了。
老翁当时不免也心生了醋意，便一气之下约柏世亲王决斗，理由自然是谁赢了谁以后陪这女子在岛上生活，输了之人十八年不得踏入岛上半步！
柏世亲王早就有占领此岛的意图，只是一直没