En 1991, Dany Carrel a publié son autobiographie, L'Annamite, chez Robert Laffont dans la collection Vécu, livre qui sera adapté pour la télévision par Thierry Chabert. Elle y évoque notamment son enfance et sa souffrance de ne pas connaître sa « vraie » mère, son père étant en outre mort lorsqu'elle avait trois ans. La publication de cette autobiographie va offrir l'occasion à Jean-Pierre Foucault, dans le cadre de son émission Sacrée Soirée, de faire entrer en contact la mère et la fille, pour la première fois.

Tout comme sa sœur Alice, d'un an sa cadette, elle est née en Indochine française des amours d'Aimé Chazelles du Chaxel, directeur des douanes, et d'une Vietnamienne prénommée Kam, maîtresse de son père. Cette double origine lui vaut très vite le surnom d'« annamite » (mot désignant alors les Vietnamiens). Elle ignorera longtemps les vraies raisons de ce qu'elle considère plus comme un sobriquet que comme une marque d'affection.