Imposer au père la garde de l'enfant le wk

Bonjour,

Je suis séparée du père de mon fils depuis 8 ans. Le père a des horaires décalés et travaille souvent le week end. Nous habitons la même ville. Il a des jours de repos dans la semaine. En général il prend mon fils de 11 ans le mardi soir et le ramène le mercredi une semaine sur deux. Je vais déménager avec mon nouveau concubin à plus de 40 km d'ici. Il serait donc ridicule de faire la même chose (prendre le mardi soir et le ramener mercredi pour autant de km) d'autant plus qu'il n'a pas de voiture, c'est pourquoi je voudrais qu'il prenne mon fils un week end sur deux. Le père de mon fils dit qu'il a le droit de refuser du fait de ses horaires décalés. Est-ce vrai ?

D'avance merci