Clotire de compte et assurance habitation

Bonjour, je viens vous demander conseil, car j'ai l'impression que ma banque essaie de m'arnaquer. je compte fermer mon compte au crédit agricole, car ayant peu de revenu, je préfère un livret A et de plus ayant déménagé depuis longtemps, je préfère avoir une banque où je peux me déplacer en cas de problème. Hors, ma conseillère bancaire me soutient que je ne peut pas clôturer mon compte vu que mon assurance habitation dépend d'une de leur filière (pacifica). Tout cela me parait bizarre, elle avait déjà essayé de me faire croire que je ne pouvais pas ouvrir un compte ailleurs parcequ'à l'époque j'avais un emprunt étudiant chez eux, remboursé depuis.
Est ce que quelqu'un pourrait me donner son avis?
Merci d'avance, bonne journée à vous.