Séparation entre concubin avec enfants

Bonjour,
Je me joins à vous car je me pose bien des questions.
Je viens de me séparer du père de mes deux enfants de 3 et 2 ans et demi, depuis la semaine dernière; j'ai quitté la région et suis hébergé dans ma famille en attendant de trouver un appartement ànplus de 500 km du père.
J'ai déposé une main courante pour signaler mon départ du logement et de ce fait notre séparation. Cela ne fait qu'une semaine que je suis partis mais je me pose des questions pour la suite, car il est très menaçant vis à vis de moi il me menace de venir cherchez les enfants. je sais que il a autant de droit que moi mais ce n'est vraiment pas quelqu'un de bien, et je sais qu'il ne pourra jamais assumer nos enfants même pour un simple week-end. Je voudrais savoir si il est possible que je demande à ce qu'il n'est pas le droit de voir les enfants sauf dans un lieu encadré.
Merci encor de vos réponses.