Annuler ses parts sociales

Bonjour,
Lors de mon rachat de crédit immobilier effectué par la banque populaire, cette dernière nous a contraint à mon conjoint et moi même d acheter 10 parts sociales chacun , cela afin que le rachat soit accepté. Or cela représente une somme de 170 € par personne, ainsi nous aimerions récupérer au plus vite cette somme. Est ce possible? Quelle démarche doit on entreprendre? Le banquier nous a dit que nous ne pourrions récupérer notre argent uniquement si nous partons de la banque populaire. Est ce vrai? Cordialement.