Pénalités de remboursement anticipé

Bonjour,

nous avons souscrit un prêt immobilier en 2004 au prés de la caisse d'épargne Rhones Alpes, avec une clause d' absence de pénalités de remboursement anticipé, sauf si départ à la concurrence. Nous voulons relocaliser notre agence sur la caisse d'épargne PACA et en profiter pour renégocier les conditions de notre prêt. La caisse d'épargne PACA nous fait une offre intéressante, mais la caisse d'épargne Rhône Alpes nous demande les pénalités pour départ à la concurrence. En ont ils le droit ?