Déchu de son autorité parentale ?

Bonjour,
j'ai besoin de votre aide et de conseils, je vais tenter d'être le plus claire et concise possible. Merci d'avance de votre attention.
Voilà, j'avais 18 ans quand je suis tombée enceinte d'un homme qui en avait 10 de plus que moi. A l'époque bien sûre je l'ignorais, mais cet homme était un manipulateur, dépressif et drogué de surcroît. (Oui, la totale...) Du premier jour de ma grossesse jusqu'à l'accouchement, la spirale de la violence psychologique (et parfois physique : viols) se sont abattus sur moi. Il me pensait piégée par ma grossesse, et pouvait donc tout se permettre avec moi. Pour consolider son emprise, il a reconnue ma fille. Après la naissance de ma petite fille, je vous avoue avoir penser à la laisser chez mes parents et mettre fin à mes jours pour échapper à son emprise. (merci la dépression..)
Dieu merci, quelqu'un ma sortie de cette enfer. Ma fille avait deux moi quand j'ai pris mes valises et que je suis partit. Depuis (cela fait 3ans) je vis avec mon "sauveur" ;o) qui est l'homme de ma vie et qui à élevé et aimer ma fille comme si elle était la sienne. Nous avons scellé notre bonheur avec un petit frère qui nous à rejoint il y a peu. Comme cela fait 3ans que le père biologique n'a pas donné signe de vie, j'ai fait une demande au près du JAF pour avoir la garde exclusive de ma fille. Requête acceptée.
Aujourd'hui, avec tout le recul nécessaire, je souhaite que ce père biologique soit déchu de son autorité parentale. Que ma fille ne porte plus son nom, et que mon conjoint l'adopte.
Mais par où commencer ?!
Merci et à bientôt