కుమారస్వామి కన్నడ సినిమా నటి <MASK> ను 2006లో వివాహం చేసుకున్నాడు.  వారికి ఒక కుమార్తె షర్మిక కె.స్వామి కలదు. ఈ వివాహం భారతీయ శిక్షా కోడ్ సెక్షను 494 ప్రకారం హిందూ వ్యక్తిగత చట్టం క్రింద కోర్టులో చట్టపరమైన పరిశీలనకు వచ్చింది.  అయినప్పటికీ కర్నాటక హైకోర్టు సరైన సాక్ష్యాధారాలు లేనందువల్ల కేసును కొట్టివేసింది.  
హెచ్. డి. కుమారస్వామి
హెచ్.డి.దేవెగౌడ రాజ్‌కుమార్ రాధిక బి.ఎస్.యడ్యూరప్ప