Séparation garde enfant

Bonjour à tous, 

Je me sépare de mon conjoint (union libre), nous avons deux enfants à charge (2 ans et 3 mois reconnus).

Monsieur ne veut aucun dialogue, il est agressif, me menace de mort devant les enfants, se met à fumer énormément de cannabis et laisse trainer les joints dans la maison. Je me fais rabaisser quotidiennement. Il voudrait la garde un week-end sur deux mais j'ai très peur au vu de son état (il a été diagnostiquer dépressif majeur + cannabis+ agression verbale).

Que puis-faire dans cette situation ? 

Merci à vous de vos retours.