Jours de fractionnements

Bonjour,
L'été dernier, mon chef m'a obligé de changer mes deux semaines de Congés Annuels en heures de récupération car mon entreprise me devaient trop d'heures. J'ai accepté car je ne voulais pas avoir d'ennuis. Ne pouvant poser mes CA en dehors des vacances scolaires, j'ai du les fractionnés en dehors de la période légale. Quand au mois de février, nous avons enfin obtenu un décompte officiel de nos heures de récupérations, du nombre de jours de congés et de fractionnements. Quelle surprise de voir que je n'avais pas droit à ces derniers???
D'où ma question, mon chef avait il le droit de me transformer mes CA en récup? Ai je réellement perdus mes jours de fractionnements?
Il veut que je fasse la même chose cet été..
Merci de vos réponses.