Il ne veut pas se séparer

Bonjour,
je veux me séparer avec mon concubin(pas de PACS ni mariage) nous avons un petit garçon de bientôt 5 ans. mais il refuse de se séparer: il ne veut pas aller voir la médiatrice (que j'ai déjà rencontrée), pas d'avocat et me soutient qu'il ne verra pas le juge même s'il est convoqué.
je ne sais pas quels sont mes droits: puis-je quitter le domicile avec mon fils sans qu'il porte plainte pour abandon de domicile ou soustraction d'enfant mineur? puis je partir seule (car je n'ai pas de point de chute stable pour le moment) sans qu'il dise abandon d'un enfant? dois-je contacter un avocat spécialisé? dois-je faire une main courante pour expliquer la situation?

merci