Il a une fille,
Charlotte Gainsbourg, avec l'actrice et chanteuse anglaise Jane Birkin, et un fils, Lucien (Lulu), avec sa dernière compagne, Bambou. Avant d'avoir 30 ans, Lucien Ginsburg s'adonne à la peinture et gagne sa vie en jouant du
piano dans les bars. Ses premières chansons « à l'ancienne » sont largement influencées par
Boris Vian, mais Gainsbourg s'essaiera toujours dans des styles totalement différents :
jazz, pop anglaise, reggae, électro, hip hop... Le succès le gagne en 1965 alors qu'il sort « Poupée de Cire, Poupée de Son », interprétée par
France Gall pour l'
Eurovision : sa chanson remporte le Grand Prix. Puis, il provoque un véritable scandale en France avec son titre « Les Sucettes » : apparemment, France Gall n'a pas relevé le caractère sexuel des paroles pendant l'enregistrement... En 1969, il sort « Je T'Aime... Moi Non Plus » (son plus grand succès international) avec des gémissements de femme en fond sonore. Enregistré pour son ex,
Brigitte Bardot (qu'on peut entendre sur « Bonnie & Clyde »), c'est finalement sa future compagne,
Jane Birkin, qui l'interprète.