曾有四位配偶：
首任妻子梅麗芳，因性格不合離異
第二任妻子梁添添，因肺病早逝（29歲）
第三任妻子賽珍珠，生有三子(鄧兆楷、鄧兆鴻、鄧兆康)，因性格不合離異
第四任妻子洪金梅1965年開始同居，誕下四子女（鄧兆尊、鄧兆榮、原名鄧翠玉的鄧小艾和鄧碧玉），並在1992年正式結婚