Enlèvement d'enfant par le papa

Je vis chez mon concubin depuis 7 ans et nous avons une petite fille qui va avoir 6 ans début août. Je n'ai pas pu trouver d'emploi et me suis occupée de ma fille depuis qu'elle est née. J'ai tout quitter, ma ville, ma famille, et suis en disponibilité.
Nous ne nous entendons plus depuis plus de 3 ans car il est rustre, me fait du harcèlement moral, n'est pas gentil avec moi et manipule sa fille contre sa maman, il lui monte la tête contre moi.
J'ai entamé une procédure auprès du JAF et voulait partir avec mon enfant, mais il m'a surveillée et a dû entendre une conversation téléphonique et c'est lui qui est parti de la maison il y a 3 jours, chez sa soeur à 8 kms d'ici, avec la petite. Il l'a signalé à la gendarmerie. Moi je les ai appelé aussi, mais ils ne peuvent rien faire pour moi, alors j'ai fait une main courante au Commissariat, même si on m'a dit que cela ne servirait à rien.
Il m'a dit qu'il ne reviendrait pas, ni la petite, tant que je ne serai pas partie de chez lui, je dis bien chez lui.
Je lui téléphone sur son portable, il me passe ma fille mais en mettant le haut-parleur.
Je lui ai demandé à voir ma fille, en sa présence à lui, mais il a refusé catégoriquement.
Maintenant il me dit qu'il va venir me déloger. Je précise que l'on a aménagé sa maison avec tout mes meubles à moi. Je n'ai pas de famille ici.
Mon avocat me dit de ne pas partir, sinon il dira que j'ai abandonné ma fille et je ne la reverrai pas. Nous sommes convoqués le 9 septembre chez le juge.
A-t-il le droit le faire, avec les gendarmes, ou sa famille ?
A-t-il le droit ne m'empêcher de voir mon enfant ?
C'est urgent. Merci de ma répondre très vite.