Jean est né le 11 juillet 1918 au Péage de Roussillon, son père  (1884-1957) était le directeur des Usines Chimiques du Rhône, devenues Rhône Poulenc. La famille Ledru habitait le Rafour, la magnifique maison du Péage. Sa mère, Clotilde Armand (1889-1976) est Comte par sa mère.
Il était le frère de Marie-Rose (1912-) Pierre (1914-1993) Madeleine (1916-) Christiane (1921-) Paulette (1925-1985) Simone (1926- ) et Bernard (1931-)