Retour du droit de visite et accueil de l'enfant à son domicile

Bonjour,

mon jugement de divorce stipule que le père doit ramener ou faire ramener l'enfant au domicile de sa mère.
Par faire ramener, je comprends que je ne peux m'opposer à ce que quelqu'un d'autre le fasse à sa place, soit.
De mon côté en revanche, mon nouveau compagnon qui habite avec moi peut-il accueillir l'enfant si je suis absente ? Il est bien stipulé "a mon domicile", mais je ne suis pas sûr de ce que cela entraîne juridiquement et si mon ex-mari refuse de le laisser à un autre que moi, que faire ?

merci pour vos conseils