金正日的元配夫人是洪一茜。在洪一茜生下一个女儿之后，金正日爱上了比他大6岁的成蕙琳。当时，成蕙琳已经结婚，而且育有一子一女。成蕙琳是朝鲜当时最性感的电影明星。成蕙琳嫁给金正日之后，生下长子金正男。

金日成反对这桩婚事。金日成反对的理由有三:

一是电影明星不适合于“第一家庭”；

二是成蕙琳已经有过一次婚姻，而且又有子女；

三是成蕙琳来自韩国，社会关系复杂。

由于金日成的干预，成蕙琳不能作为金正日夫人在公众场合露面。

后来，成蕙琳的健康状况每况愈下，在20世纪80年代前往莫斯科接受治疗，此后她一直在莫斯科过着舒适的生活，直到2002年在莫斯科去世。

在20世纪70年代中期，金正日在父亲金日成举办的晚会上，见到了高英姬，陷入热恋。

高英姬是一位舞蹈演员，1953年出生于日本东京，后来迁往大阪，在1960随父母从日本前往朝鲜。高英姬的父亲是出生于日本济州岛的旅日朝裔，后来成为日本著名的柔道选手，曾经为金日成表演过柔道。

跟成蕙琳相比，高英姬的情况其实差不多。高英姬也是演员，而且社会关系也很复杂。但是，金日成对金正日的这一婚姻未加反对，因为高英姬一家从日本回朝鲜定居，属于“爱国侨胞”，而且高英姬比金正日年轻11岁，不像成蕙琳比金正日大6岁，何况高英姬未婚，不像成蕙琳那样已经嫁人并育有一子一女。

高英姬与金正日婚后，生下两子。

金正日的三个儿子出生年份如下:

金正日的长子金正男(成蕙琳所生)，生于1969年，现年38岁。

金正日的次子金正哲(高英姬所生)，生于1981年，现年26岁。

金正日的三子金正云(高英姬所生)，生于1983年，现年24岁。

金正男受到良好的教育。他曾经被送往俄国、北欧和日本留学，他酷爱计算机技术和哲学。金正男曾担任朝鲜国家安全部要职。2001年，金正男担任朝鲜计算机委员会的领导人。

后来，金正男以照顾母亲的名义，前往莫斯科，直至2002年8月金正男的母亲成蕙琳在莫斯科病逝。此后，金正男移居北京，又去澳门，于2007年重返朝鲜。

在2003年上半年，朝鲜开始宣传高英姬，称她为朝鲜的“伟大的母亲”。2004年秋，高英姬死于乳腺癌。朝鲜的宣传把高英姬称为“金正日最忠诚的战友”。

朝鲜开始出现“从白头山到汉拿山”这一口号，对高英姬加以神圣化，因为白头山是金正日出生之地，而汉拿山是高英姬祖籍所在地。

在高英姬之后，金正日又迎娶了比他小22岁的第四位夫人金英淑。

金英淑生于1964年，毕业于平壤音乐舞蹈大学，她的专业为钢琴。从20世纪80年代初起，她担任金正日的“技术书记”。所谓“技术书记”，就是负责照顾朝鲜劳动党政治局候补委员以上高干们的健康，每一个高干配有一名技术书记，通常由护士来担任。金正日则配有多名技术书记，金英淑是其中之一。如今，金正日出访，金英淑总是以“朝鲜国防委员会课长”的名义随行。

2004年，金正哲被任命为劳动党中央委员会组织部第一副部长。

金正哲1981年9月25日出生于平壤，自幼便被送入专为朝鲜劳动党领导人的子女开办的小学接受教育。后来被送往瑞士伯尔尼的国际学校留学。在瑞士学习期间，金正哲的身份为大使馆司机的儿子。由于金正哲的“父亲”总是对他毕恭毕敬，让瑞士方面产生了怀疑，这才得知他的真面目。

韩国一家杂志曾报道说，金正哲兴趣比较广泛，尤其是对美国的NBA几乎达到痴迷程度，他曾让金正日在乡间别墅旁修建了一个篮球场。