Remboursement anticipé d'un prêt conso avec différé

Bonjour,

j'ai souscrit un prêt conso de 5000 euros. Il se compose d'un différé de 24 mois, puis d'un remboursement de 24 mois. Durée total 48 mois. Mensualités de remboursement : 216,11 euros (assurance incluse).
Taux du prêt : 0,98%
Pas de frais de dossier
Assurance : 0,75 euros par mois sur toute la durée.
Le contrat mentionne qu'il n'y a pas de pénalité en cas de remboursement anticipé.
Durant le différé, je payais chaque mois uniquement les 0,75 euros d'assurance.

Au bout des 20 premiers mois (donc durant le différé), j'ai remboursé la totalité du prêt en anticipé. Or la banque m'a débité 5090 euros environ au lieu de 5000. Ils m'indiquent que les 90 euros correspondent aux intérêts du prêt sur les 20 mois de différé.

A mon sens, cela contrevient à l'échéancier fixé par le contrat. Est-ce légal ?

Merci.