Garde alternée.

Bonjour,
J'ai divorcé de mon mari en 2009, nous avons un enfant de 4 ans en commun, et nous avons choisi la garde alternée. L'ordonnance du juge précise que du mardi soir au jeudi matin et un week end sur deux du vendredi soir au lundi matin c'est mon ex mari qui en à la garde. Mon ex mari rentre chez lui vers les 18h40, et je m'en occupe jusqu'à ce qu'il arrive. A la suite d'une mauvaise entente, il ne veut plus que je m'en occupe, ma question est de savoir à quelle heure commence "le soir". En sachant que moi je récupère notre enfant vers 17h, chez mes beaux parents, puisque se sont eux qui vont le chercher à l'école. ais-je le droit de m'opposer à lui ?