1960 के दशक में राज कुमार ने एंग्लो-इंडियन जेनिफर पंडित से शादी की थी। खबरों के अनुसार बाद में उन्होंने हिंदू रीति-रिवाजों के अनुसार अपना नाम बदलकर गायत्री कुमार रख लिया था। राजकुमार और गायत्री के तीन बच्चे बेटे पुरु राजकुमार, पाणिनि राजकुमार और बेटी वस्ताविकता पंडित हैं।