1 weekend sauter cause travail?

Bonjour, divorcé ,j'ai la garde de ma fille et mon ex mari un week end sur deux et la moitier des vacances. j'ai trouvais un emploi de 3 semaines dans une autre région a environ 700 km ou j'ai ma famille qui m'hébergera et qui pourra garder ma fille pendant mes heures de travail. ceux qui fait sauter a mon ex mari un week end mais que je lui laisserais rattraper sans aucun problème a mon retour. Seulement, on est pas en bon termes alors c'est encore un refus de plus! dois je laisser tomber mon boulot qui en vaut vraiment le coup ou ais je un recours???? je souhaite faire ça en toute légalité pour éviter encore plus de friction et ne pas risquez qu'on me retire la garde! merci de m'éclairer.