Il laisse les enfants seuls à mon domicile

Bonjour,
Je suis séparée depuis 8 ans et viens d'acheter une maison. Depuis, le père de mes enfants refuse de les ramener chez mes parents lorsque je travaille. Je suis infirmière et il n'est pas rare que je sois d'après midi les dimanches.
A t il le droit de les laisser seul à mon domicile en sachant qu'ils n'ont que 13 et 10 ans ?
Jusque là, il acceptait de les ramener chez mes parents (à 8kms de mon domicile actuel) mais a subitement décrété qu'il ne le ferait plus. Il compte les déposer même lorsque je serai absente (mon fils de 14 ans ayant les clés de notre maison...)
Peut il faire cela lorsque je ne suis pas chez moi pour raison professionnelle ? En a t il le droit ?

Merci par avance pour vos réponses !!

Rachel