Arrêt travail avec autorisation de sorti

Bonjour,
Ayant des problèmes de santer de type gastrique qui perdure depuis plusieurs mois et qui à l'occasion me faisais manquer des jours de travail de temps à autre mon médecin ma mis 2 semaine d'arrêt pour me reposer et voir si le nouveau traitement opère. Après avoir poser l'arrêt J ai êter aperçu par mon directeur dehors le soir lors de la fête de la musique. Sachant que sur mon arrêt de travail mon médecin à autoriser les sorties sans préciser d'horaire, mon directeur à-t-il quelque chose à me reprocher au yeux de la lois ?