Récuperer l autorité parentale pour un père ?

Bonjour, je souhaiterai savoir comment faire sans pour autant que cela est un cout excessif avec avocat etc, si mon ex mari pourrai récupérer l' autorité parentale envers nos 3 enfants ?
Je vous explique cela fait 1 an et demi qu' il repend ses enfants régulièrement avec une absence d 1 an et demi environs " à cause d 1 femme on va dire qui ne supportai pas les petits " bref moi n ayant plus de nouvelles de lui avec médiateur pour essayer d avoir contact avec les petits etc...les seules nouvelles été qu on le laisse tranquille et qu il ne voulai plus voir ses enfants qu il avait 1 autre vie maintenant sachant que la pension alimentaire était saisi sur son salaire et que son travail m avai prévenu qu il ne pourrai plus me la payer vu que monsieur ne se présentai plus au travail. Il est revenu un jour pour pouvoir reprendre ses enfants etc et moi par "sécurité j'avai déjà fait une demande pour que la caf puisse prendre son relais au niveau de la pension alimentaire et enlever son autorité parentale aujourd hui il les repend régulièrement un week-end sur 2 vacances plus ou moins partagé, je ne sais plus trop comment m y prendre la, merci de vos avis.