pięciokrotnie żonaty: 1. Sophie Kabel (rozwód), dziecko; 2. Micheline Cheirel (26.06.1936 - 1941, rozwód), dziecko; 3. Hedy Lamarr (27.05.1943 - 17.07.1947, rozwód), 3 dzieci w tym syn Antony (ur. 01.03.1947); 4. Evelyn Auff Mordt (23.11.1949 - 1955, rozwód); 5. Alba Julia Lagomarsino (od 22.09.1958 do jego śmierci)