Non respect droit hébergement

Bonjour,
Séparée du père de mon fils de 4 ans et demi, la jaf lui à accordé le droit d'hébergement classique soit un week end sur 2 et moitié des vacances. Cela fait moins de 2 mois que nous avons reçu la décision. Aujourd' hui cela fait 3 semaines que mon fils n'a pas de nouvelles de son père. Il ya 15 jours il ma prévenue le jour meme qu'il ne pouvait prendre son fils pour le week end. Et la plus de nouvelles.... Logiquement il doit le prendre demain soir mais comme il n'a toujours pas appelé je n'ai pas dit à mon fils qu'il allait chez son père, au cas ou il ne le prendrait pas encore. Que faire si demain il vient quand meme le chercher? Est ce que je peux refuser qu il le prenne étant donné qu'il ma pas prévenue? Je dois toujours être à sa disposition, il ne se préoccupe pas si je travaille ou pas et que je dois me debrouiller pour faire garder mon fils à la dernière minute... Et il y à un mois il se plaignait qu'il ne voyait pas don fils grandir, mais quand il peut le prendre il n'en profite pas!
Pour ce qui est de la pension il la payée le mois dernier pour la première fois et puis plus rien, alors que la jaf à tenu compte de sa demande pour le montant!
Mon ex à pourtant des problèmes alcool et drogue, et il n'est pas stable, ce que j'avais signifié au juge, et pourtant on lui à accordé le droit d hébergement... Ou est la prise en compte de la sécurité de l'enfant dans tout ça? Je me demande si je ne dois pas refaire demande au jaf en lui retirant l'autorité parentale??? Je ne sais pas quoi faire si demain il vient le chercher...
Merci de votre réponse.