1909. umrla je Staljinova prva žena, Ekaterina Svanidze. Ova smrt za njega je bila veliki gubitak. Nesklon izražavanju emocija, a još više šarenim okretima govora, više nemladi revolucionar govorio je o hladnom kamenu koji mu je ušao u srce. Tko zna kako bi se razvijala svjetska povijest da ovaj ledeni i tvrdi predmet nije smrskao prsa budućeg čelnika najveće države na svijetu? Međutim, subjunktivna raspoloženja su strana ovoj znanosti.
Od njegove voljene žene bio je Jakovljev sin, tek beba. Moj otac nije imao vremena brinuti se o svom odgoju, imao je drugih poslova. Dječak je odrastao sa svojom bakom, majkom Ekaterinom (Kato) u Tbilisiju, zatim je studirao u Moskvi - prvo u školi, a zatim na fakultetu, u elektrotehnici. Odnos sina i oca teško je opisati, a vrlo je malo materijala koji o njima svjedoče. Činjenice govore o neuspješnom pokušaju samoubojstva zbog nesretne ljubavi. Pucanj u prsa ljutito je osudio Jacobov otac, zapravo mu je odbijena kuća.
Teško je reći da li je sovjetski diktator volio svog najstarijeg sina. Cijela se zemlja divila hrabrosti Staljina, koji je odbio spasiti starijeg poručnika Džugašvilija, koji je zarobljen u blizini Vitebska, i praktički ga osudio na smrt. S druge strane, svegodina nakon smrti sina, vođa svjetskog komunističkog pokreta nosio je crnu majicu ispod svoje tunike u znak žalosti, skrivenu, kao toliko u njegovom životu.
Staljinova druga žena, Nadežda Sergejevna Alilujeva, bila je petnaest godina mlađa od svog muža. Kći profesionalnog revolucionara, plijenila ju je imidž romantičnog borca koji se vratio iz progonstva nakon Veljačke revolucije. Tada je imala samo šesnaest godina, a buduća generalna sekretarka Centralnog komiteta Svesavezne komunističke partije boljševika imala je trideset i osam godina.
Aktivan životni položaj, neiskustvo, naivnost i sklonost revolucionarnom romantizmu živcirali su njezina muža, težnju za moći i moći.
Njena osobna skromnost dosegla je krajnost - mnogi kolege i čelnici organizacija u kojima je Nadežda Alilujeva radila nisu ni znali da je ona Staljinova žena. Htjeli su je čak izbaciti iz stranke 1921., optužujući je za pasivnost i anarhosindikalizam (tada je bilo moderno objesiti svakakve "izme" na osobu), ali je njezin suprug ustao. A Nadyusha je radila ne bilo gdje, već u tajništvu Lenjina, Pravde i redakciji Revolucije i kulture, pa čak i studirala na Industrijskoj akademiji. Ni tamo ni učitelji ni učenici nisu znali da je Staljinova žena pored njih.
Imali su dvoje djece, sina Vasilija 1921. i kćer Svetlanu 1926. godine. O životu druge obitelji Josipa Vissarionoviča zna se puno više nego o prvoj. To je postalo moguće zahvaljujući knjizi "Dvadeset pisama prijatelju", objavljenoj 1967. na Zapadu. Kći diktatora Kremlja otkrila je mnoge tajne i do detaljaopisao svoj život.
Staljinova druga supruga počinila je samoubojstvo pod misterioznim okolnostima nakon banketa kod Vorošilovih povodom 15. godišnjice Oktobarske revolucije. Za stolom se muž ponašao grubo, a to je možda izazvalo samoubojstvo. Bilo je nekoliko verzija događaja, od umiješanosti Nadežde Alliluyeve u antivladinu zavjeru, do stalnih bolnih migrena, ali istina se više ne zna.
Na grobu Staljinove žene podignut je spomenik, vrlo lijep i izražajan. Osim imena, prezimena i datuma, na njemu je naznačena stranačka pripadnost: "član KPSS (b)".