Frais délégation assurance

Bonjour,
J'ai contracté un prêt à la banque populaire pour l'achat d'un appartement. La banque nous a fait accepté son contrat d'assurance emprunteur avant que nous recevions l'offre de prêt. Je me suis rendu compte que son prix est excessif (plus de 16400 € de cotisation pour 179 000 de prêt) et j'ai envoyé une lettre AR pour résilier. La banque nous demande tout d'abord d'accepter des frais de 800 € (150 € par tête pour la délégation + 500 e de frais d'avenant). C'est du vol. Quelqu'un a t'il déjà été dans cette situation ? avec vous des conseils à nous donner ?
Merci pour vos réponses