Refus de prise en compte d'un RIB

Bonjour,
j'aimerai connaître la marche à suivre lorsque la banque refuse de prendre en compte un rib. Je m'explique. En juin, mon conjoint et moi même avons ouvert un compte-joint à ma banque. Mon conjoint a donc précisé ce changement à sa banque et les a informé que dès que tout les changement de domiciliation bancaires auraient été pris en compte il clôturerait son compte chez eux. Or, nous envoyons tout les mois notre nouveau RIB à cette banque et comme nous avons un crédit chez eux elle continue à nous prélever sur ce compte, nous ne pouvons donc pas le clôturer. De plus, nous avions pris l'assurance auto+ habitation chez eux et en apprenant que nous partions ils ont décidé d'augmenter nos cotisations prétextant que le bonus-malus de mon conjoint n'est pas exact et ce, malgré le relevé d'information fourni par l'ancienne assurance. Ils viennent de nous prélever quasi 40€ de plus alors que nous n'avons rien signer quant à ce changement et prélevé 149€ de plus en août.
Que pouvons nous faire?
Merci