现年65岁的吕良伟与太太杨小娟结婚多年恩爱如昔，两人育有一子吕善扬，过往吕善扬不时和爸爸一起出席活动，但近年甚少公开露面。早前吕良伟与太太杨小娟出席一个开幕仪式接受访问时，难得谈及儿子，并透露他现在在北京实习，大约需要半年时间，之后让儿子自己选择未来的路。两人更对儿子赞不绝口，大受女生欢迎！
现年21岁的吕善扬早在13岁时就到国外剑桥留学，因而独立自理能力很强，煮饭、洗衣服都难不倒他，尤其是厨艺了得：「女生都挺喜欢他的，其实他好细心，好体贴，也好孝顺，好疼我们啦。」有报道指杨小娟曾大爆儿子从小到大都好喜欢甄子丹的女儿甄济如（Jasmine），更直言想Jasmine做儿媳，不过吕良伟就再次澄清：「不是，他们是好朋友罗，从细长大，好像哥哥和妹妹一样，他现在也是这样，好疼Jasmine，好像妹妹那样照顾她罗，走出走进都好保护她，我觉得一个男生对妹妹那样是风度，而且是一个责任罗。」
多年来坚持养生的吕良伟，绝对是圈中的不老男神，而杨小娟也一向Keep住好身形，但儿子吕善扬自小身形就偏圆润，虽然杨小娟一直以来都好鼓励儿子减肥，两母子更不时一起做运动，不过效果似乎不太理想。随着年龄增长，吕善扬的身形也愈来愈圆润，据知他的身高172cm左右，但体重达90kg，吨位十足，样貌平平的他似乎没有继承父母的优良基因，显得老实憨厚。虽然一直有传吕善扬力追Jasmine，但吕良伟夫妇就极力否认，澄清两人只是青梅竹马的好朋友，关系就像兄妹一样！
