赵雅芝
是妻子的“理想范本”
在《路是无限宽广》一书中，吕良伟首次披露了自己的成长经历。原本在越南过着快乐童年的吕良伟，11岁那年由于越南战乱，不得已投奔叔叔迁居香港。为了照顾重病的母亲，吕良伟中学没毕业就退学了，在工厂里面做技术工人赚钱养家，“报考无线艺员训练班还是在我父亲的鼓励之下去的，就此改写了我的人生。”
吕良伟回忆，训练班毕业后，他和陈玉莲等人默默跑了两年龙套，直到接到《上海滩》监制招振强的电话，邀请他出演丁力。“当时真的晕了，浑身上下没有了半分力气，脑袋完全被‘我演丁力’四个字充满，涨得难受。后来我才知道，监制是看到我之前拍一部戏时带伤跳水，给他留下了深刻印象，所以在《上海滩》选角时才想到了我这个毛头小子。”
回忆起拍摄《上海滩》的过程，吕良伟印象最深刻的就是“神仙姐姐”赵雅芝，“当时见到她第一眼就忍不住惊叹，这个女生真是漂亮！”在吕良伟心中，赵雅芝是妻子的“理想范本”，“后来我听说，为了事业和家庭她在事业如日中天的时候毅然退出，当时我暗地里就想，如果自己以后的太太能这么温柔贤惠就好了。”
周海媚
离婚时才知当年没领证
在《路是无限宽广》一书中，吕良伟首度公开披露了自己三段感情经历。
“1985年，无线准备开拍一部电视剧，叫《小岛风云》，让我去演男主角。当时我得知和我配戏的是一个新人，叫周海媚，当时我也没有太在意，直到我见到她第一眼。”吕良伟回忆起自己对周海媚“一见钟情”的全过程，“我去剧组定妆，没想到一抬头就看见一个大美女，哇，瓷娃娃般的肌肤，精致的五官，清纯的笑容，我一下子就被迷住了。”
当了一阵子“护花使者”，周海媚终于被吕良伟打动，两人顺理成章地走到一起。“33岁生日那天，我和海媚(周海媚昵称)飞到拉斯维加斯，在一个小教堂领了证，海媚只看了一眼，就把她的那张纸递给了我，说让我保管。”
吕良伟说，“结婚以后，海媚搬进了我家里，但两人的矛盾也随之产生。我是个很重视家庭生活的人，但海媚的生活习惯却跟我家人格格不入。她习惯了很晚才睡，第二天起床已经是下午两三点了，时间一长我就对她有了抱怨，吵到最后，两个人谁也不肯让步。”
1996年，吕良伟和港姐邝美云准备结婚，他带着周海媚去办离婚手续。结果发现他们的婚姻根本是无效婚姻。“我们当年只是在教堂办了婚礼，根本没去婚姻登记处登记，也没在香港注册。这段保密了十年的婚姻，其实我们是非法夫妻。”