在吕四一带，有一条世代沿袭的规矩，那就是“女人不能上船”。这个规矩源自一个美丽传说。

吕四古镇，距今已有1400余年历史，古称白水荡，传说吕洞宾曾经四次仙游如蓬莱仙岛般的白水荡，故得名吕四。吕祖文化、八仙传说在当地深入人心。传说中八仙分别代表着男、女、老、少、富、贵、贫、贱。八仙所持的檀板、扇、拐、笛、剑、葫芦、拂尘、花蓝等八物为“八宝”，代表八仙之品。由于八仙均为凡人得道，所以个性与百姓较为接近。过去吕四年年有庙会，在迎神赛会时也都少不了八仙。明代吴元泰作《八仙出处东游记》，铁拐李、吕洞宾等八仙过海的故事流传至今，文艺作品中以八仙过海、八仙献寿最为有名。

杂剧《争玉板八仙过海》中，相传白云仙长有回遇蓬莱仙岛牡丹盛开时，邀请八仙及五圣共襄盛举，回程时铁拐李建议不搭船而各自想办法，这就是后来“八仙过海、各显神通”的起源。此时李铁拐抛下自己一项法器葫芦，汉钟离扔了芭蕉扇，张果老放下坐骑“驴”，其他神仙也各掷法器下水，横渡东海。由于八仙的举动惊动了龙宫，东海龙王率领虾兵蟹将前往理论，不料发生冲突，蓝采和被带回龙宫。之后八仙大开杀戒，怒斩龙子，而东海龙王则与北海、南海及西海龙王合作，一时之间惊涛骇浪。此时曹国舅拿出玉板开路，将巨浪逼往两旁，顺利渡海。最后由南海观音菩萨出面调停摆平，要求东海龙王释放蓝采和之后，双方才停战。

因为八仙闹过海，吕四沿海人们大都有“七男一女不同船”的禁忌，后又逐渐演变为禁止女的上船，不能从网具上跨过，触犯了禁忌必须要敬利市才能解除。