Über Castros Privatleben ist nur wenig bekannt. Die Ehe mit Mirta Diaz-Balart dauerte nur von 1952 - 1954. Sein erster Sohn Felix Fidelito Castro Diaz kam aus dieser Verbindung.
Celia Sanchez - die Gefährtin aus Revolutionstagen, verstarb 1980.
Natalie Fernandez - eine Affaire Castros - gebar ihm die uneheliche Tochter Alina Fernandez Revuelta.
Mit seiner zweiten Frau - Dalia Soto del Valle - hatte Castro fünf Söhne. Es werden ihm außerdem bis zu sechs weitere uneheliche Kinder nachgesagt.


