Demande de modification de mode de garde

Bonjour j’expose mon soucis ici en espérant avoir un début de réponse ou une réponse avant de faire la demande.

je suis séparée depuis 2 ans et j’ai une petite fille de 4 ans  en garde alternée suite à un accord amiable. Nos rapports avec son père ayant considérablement régressés ma fille le ressent et je souhaiterais demander une modification du jour de récupération de la petite ! Actuellement nous faisons du dimanche au dimanche ! Mais le changement de logement le dimanche ainsi que la reprise de l’école le lendemain  devenant de plus en plus stressant pour elle ! Je souhaiterais passer du vendredi au vendredi ainsi la petite passerait un week end complet avec l’un de nous deux et recommencer sa semaine sereinement. Monsieur, n’est pas d’accord car il travaille jusqu’à 21h la semaine (c’est essentiellement sa mère qui s’occupe de la petite lorsqu’elle est chez lui) ! J’ai donc suggéré du lundi au lundi mais monsieur n’est pas d’accord non plus car il travaille souvent les dimanches soirs aussi! Une médiation ne sera pas possible non plus.  

Ma question est : est ce que je peux saisir le juge aux affaires familiales et demander cette modification ou est ce que cela sera peine perdue  au vu du rythme de travail de monsieur? 
Ou peut être que le juge suggera autre chose !? 
 

merci de votre compréhension