Frais de remboursement anticipé

Bonjour, j'ai soldé mon crédit immobilier auprès de ma banque en mars 2011. J'ai réussi à négossier en passant de 600 à 1200 euros les frais de remboursement anticipé. Pour le moment, j'ai placé l'argent de la plus value à ma banque et aucun frais ne m'a encore était débité. Ma question est : Si ma banque ne me retient pas les frais de remboursement anticipé à la clotûre du crédit, peut-elle le faire plus tard ? Puis-je contester le fait que cela n'a pas été fait au bon moment ? Cordialement.