吴耀汉现年54岁大女儿，52岁的次女因为疑似涉毒接连遭到了海关的逮捕，作为父亲的吴耀汉心里应该很不是滋味，虽然他曾经表态子女大了有子女的世界，他无暇顾及，但是两个女儿，尤其是52岁的次女就在自己的眼皮底下被带走，他是爱莫能助。那么巧合的是，两个女儿涉毒犯事之后，吴耀汉早前接受车淑梅的电台节目《旧日的足迹》访问在这个时候就播出了，在节目中吴耀汉自曝父亲当年捞偏门致富，更有吸毒的习惯——父亲吸毒，女儿涉毒，两件事先后被公开，于是令吴耀汉就间接与“涉毒”扯上了关系，成为讨论焦点。
现年81岁的吴耀汉从小开始，人生就具有极具传奇的色彩。严格来说，他称得上是出生在富裕之家的子弟，父亲吴海霖为人所知的身份是九龙巴士创办人，以及九龙殡仪馆的大股东，一家人住在山林道大宅，生活相当富贵。不过外人大多只知道这个表面，不知道实际的情况。而据吴耀汉在节目中透露，他的父亲一共有四个妻房，一共生了16个兄弟姐妹，自己的母亲是父亲二房的妻子，在他八岁的时候就已经离世，所以在这个大家族中他是势单力薄的一位，没有能力去争，没有能力去抢，母亲离世后就被父亲送到大宅之外的寄宿所生活，15岁的时候就被父亲送往英国留学。
所以，吴耀汉虽然生活在大富大贵之家，但是对自己的生活一点优越感都没有，8岁的时候就已经被送走到外面借宿，15岁又去了英国，至少在他懂事之前根本就没有认识到自己过的是富贵生活，后来一直到去了英国才知道原来自己出身富贵，因为他与三个哥哥一同在英国最贵的寄宿学校读书，如果不是父亲有钱，他根本享受不到这样的待遇，且当时他所修读的还是最贵最有前途的牙医这一科。
吴耀汉与妻子，子女
吴耀汉的家庭背景复杂，家里有16个兄弟姐妹，他不是父亲最宠爱的一位，所以与父亲的感情谈不上特别好，加之很小的时候就被送走，所以父子关系一直很薄弱。而如今回忆起往事，在节目中，吴耀汉直言，对父亲最深的印象竟然是父亲是靠捞偏门起家，还爱吸食毒品（鸦片）。
吴耀汉会提及这点，是因为车淑梅访问他时问到，他的戏剧天分是否是因为生活无忧所成就的，没想到吴耀汉的回应比较出人意料，直接曝光父亲是捞偏门起家，即是做赌场生意发达，再公开父亲喜欢吸毒，且当时还与李小龙的父亲一起吸食。不过吴耀汉也表示，这种行为在当时很普遍——吴耀汉生于30年代末期，那时候还是旧香港时代，黄赌毒盛行。而他之所以知晓这件事，是因为自己后来所住的地方就是父亲的烟房，自己是耳濡目染父亲与那些叔父的这些行为。
吴耀汉15岁被送到英国寄宿学校读书，父子的往来越来越少，直到他毕业，父子才有了交集，但是不是什么愉快的相处经历。吴耀汉当年没有完成牙医的学业，读了一年就转系改为学戏剧。因为读不成牙科，被父亲认定没有前途，所以希望吴耀汉能够返回香港继承他的赌场生意。不过吴耀汉当时为人任性，不但不回来，还毅然在19岁的时候娶了第一任英国籍太太，父子因此大闹一场，险些脱离父子关系，最后父子关系没有脱离成功，但是父子也缘尽了，没多久吴耀汉的父亲就离世了。
因为吴耀汉没有回香港继承赌业，又不是长房的孩子，他最终失去了继承父亲遗产的权利，不过在今天来看，他也因此开辟了另一条康庄大道，后来他回流香港发展，开启了一个属于自己的时代。80、90年代，吴耀汉在影视圈中的发展，达到了全盛期，80年代之后他的公价是一部电影一百万，在那个年代这个价码非常了不起，所以他说一部片酬买一套房子不是夸张，而车淑梅在访谈中听到他公开这个价码也不由一惊，可想吴耀汉当时是多有钱。一直以来，外界都盛传吴耀汉的身家有35亿，可能有点夸大了，但是数十亿的身家绝对不会少。
吴耀汉与两个女儿（左一、左二）
再回忆起自己与父亲的相处，吴耀汉也没有什么可感慨的，毕竟他不是父亲唯一的儿子，父子的关系、感情也并不是太融洽，所以对于提及父亲当年吸毒一事，他轻松自若，更直言看待这件事需要正面、乐观的态度。而吴耀汉接受这个访问的时候，他的两个女儿尚未因为涉毒出事，如今他的两个女儿接连因为涉毒出事，不知道是否他还能这么乐观面对，毕竟此时不同彼时，且面对的人也不同，相信他应该很难放宽个人心态。
吴耀汉的两个女儿因为涉毒被海关带走后，他受访的这节目就跟着播出了，说来的确是巧合，甚至让大家觉得有关部门是蹭热度。而身为主持人的车淑梅坦诚，在节目播出前曾遭到很多反对播出的声音，很多人认为不应该在吴耀汉两个女儿涉毒后播出这个访谈，因为访谈中吴耀汉公开了他父亲吸毒的事情，这很容易让吴耀汉被摆在一个尴尬的位置上。不过车淑梅认为两件事不应该牵扯在一起，且两件事与吴耀汉本人没有任何直接的关系。只能说车淑梅这么想是太过乐观了，两件事的确与吴耀汉无关，但都是吴耀汉目前的处境也相当尴尬，父亲吸毒，女儿涉毒，他不可能事不关己高高挂起。
