スターリンは、妻子などの近親者にも心を開くことはなく、多くの近親者も不幸な最期を迎えた。1905年、スターリンは最初の妻であるエカテリーナ・スワニーゼと結婚し、長男のヤーコフを儲けるも、エカテリーナは25歳で病没した。

スターリンは、息子のヤーコフに対して冷たく接した。また、独ソ戦で長男のヤーコフが内の電気柵に衝突し、自殺したと言われている<ref></ref>。

2人目の妻であるナジェージダ・アリルーエワとのあいだには、次男のワシーリー・スターリンと娘のスヴェトラーナが生まれた。ナジェージダは1932年に亡くなり、公式には「虫垂炎による病死」と発表された。彼女はスターリンとの口論の後に拳銃自殺を遂げ、自殺の遺書を残した。娘のスヴェトラーナによれば、その遺書は「一部は個人的、一部は政治的」なものだったという<ref>Koba the Dread, p. 133, ISBN 0786868767; Stalin: The Man and His Era, p. 354, ISBN 0807070017, in a footnote he quotes the press announcement as speaking of her "sudden death"; he also cites pp. 103–105 of his daughter's book, Twenty Letters to a Friend, the Russian edition, New York, 1967.</ref>。

次男のワシーリーは、周囲が気遣って空軍中将まで昇進させたが、スターリン死後に失脚して身を持ち崩した。さらに、極度の酒好きがたたり、によると、一部のロシア人はスターリンが彼女とテーブルを挟んで嘲りながらタバコを弾いたナジェージダとの夕食の席で起こった口論のあとに彼女を殺害したと信じている。歴史家は、最終的に彼女の死が「スターリンによる関連を現実から切り離した」と主張している<ref></ref>。

スターリンは、3人目の妻としてラーザリ・カガノーヴィチの姉妹であるローザ・カガノーヴィチと結婚したと見られている<ref>Kahan, Stuart, The Wolf of the Kremlin, William Morrow & Co, 1987</ref>。2001年3月、ロシアの民放テレビ局「NTV」は、ノヴォクズネツクに住む、今まで知られていなかったスターリンの孫息子ユーリー・ダヴィドフにインタビューを試みた。彼は、父親が自分たちの血統について話したと述べたが、スターリンへの個人崇拝に反する運動であるので黙っているとも話した。

<gallery> Image:Ekaterina Svanidze.jpg|スターリンの最初の妻であるエカテリーナ・スワニーゼ Image:Nadezhda Sergeyevna Alliluyeva (1901–1932).jpg|スターリンの2番目の妻であるナジェージダ・アリルーエワ Image:Stalin'schildren.JPG|左から、次男ワシーリー、娘スヴェトラーナ、スターリン Image:Joseph Stalin with daughter Svetlana, 1935.jpg|父スターリンに抱かれる娘スヴェトラーナ（1935年） </gallery>