Prêt immo et taux d'usure

Bonjour,
En 2006 j'ai souscrit un prêt immobilier pour une durée de 12 ans. Avec domiciliation des revenus
En 2013 j'ai souscrit un 2nd prêt immobilier pour 1 durée de 20 ans pour ma résidence principale.
En 2016 j'ai fait racheté mon 2nd prêt immobilier par une autre banque avec domiciliation des revenus.
J'ai donc domicilié mon salaire dans cette nouvelle banque et laissé mon revenu locatif dans la 1ère banque.

Cependant la directrice de la 1ère banque me demande la domiciliation de tous mes revenus et me menace d'augmenter de 2% le taux de mon 1er prêt
Elle doit donc rédiger un avenant avec un nouveau TE.
Ce TE sera forcément supérieur à taux d'usure actuel de 3,29% pour un prêt inférieur à 10 ans.
Ma question est celle-ci :
Est ce que mon raisonnement est juste et la directrice ne serait elle pas en faute si j'accepte ce nouvel avenant.
Merci d'avance