Separation difficile

Bonjour,

Je viens d'annoncer à mon conjoint avec qui j'ai deux enfants que je voulais me séparer car je n'ai plus de sentiments pour lui et en ai pour quelqu'un d'autre.
Le probleme c'est qu'il ne l'accepte pas.
Nous sommes obligés de vivre sous le ême toit tant que notre maison ne sera pas vendue, alors je lui ai proposé de garder les enfants 2 week end par moi et moi je ferai la même chose les 2 autres mais il me menace et me harcèle. A t-il réellement le droit de m'interdire de partir 2 week ends par mois ?
Merci pour vos réponses