Gainsbourg aurait volontairement fait pleurer Jane Birkin en lui disant qu'il avait mis ses enfants en pension sans sa permission, pour ensuite enregistrer ses pleurs.Ce sont ces bruits de pleurs que l'on peut entendre dans la chanson "Je suis venu te dire que je m'en vais".