Passer par le tribunal ou non?!

Bonjour,

Voilà, je me suis séparé du père de mon enfant il y a maintenant 2 ans et nous ne sommes jamais passé par le tribunal.
Nous nous sommes mis d'accord sur la garde en alternance, une semaine chez le papa et l'autre chez moi. Malheureusement, je sais que sont père consomme de l'alcool et de la drogue. Il fume du cannabis, en fait planter chez lui, et il lui arrive de consommer autre chose de plus dur mais pas régulièrement. La plupart de ses copains fument du cannabis et quelques-uns sont en cure de désintoxication. Il lui arrive même d'aller au café et rentré complètement saoul!! Pendant ce temps là ou il consomme, soit notre fils est gardé par sa mère ou soit il est chez moi. Le problème, c'est que je ne sais pas comment faire! La plupart de mes amis me disent de demander la garde de mon fils mais je ne sais pas quoi faire parce que je vous avoue j'ai peur de lui et que je sais que mon fils tiens à son papa, je ne veux pas passer pour la mauvaise personne.
Que dois-je faire?
Merci pour vos réponses.