Rachat de prêt

Bonjour,
Nous sommes en cours de finalisation de rachat de prêt pour notre résidence principale.
Nous souhaitions regrouper l'ensemble de nos crédits (pret immo perso + pret immo pro) et changer de banque, notre banque n'ayant pas donné suite à nos demandes de renégociation.
Nous avons été mis en relation avec un nouvel organisme bancaire par un courtier, pour lequel tout était ok. Je passe sur les retours de l'organisme bancaire différents des dires du courtier.
La première entrevue avec la banque partenaire potentielle a eu lieu début mars. Depuis nos interlocuteurs n'ont pas cessé d'être remplacés. Nous avons enfin reçu une offre le 26/06, signé un tableau provisoire d'amortissement fin juillet, pour aujourd'hui avoir un tableau définitif légèrement modifié et, à priori, un déblocage de fonds, effectif ce jour.
Ceci concerne le prêt principal.
Le second prêt professionnel n'a fait l'objet que d'une offre non formalisée (pas d'offre de prêt).
Notre ancien organisme bancaire, nous transmet le bordereau de confirmation.
Qu'arriverait-il si nous ne confirmions pas?
Aujourd'hui notre souhait de regrouper l'ensemble de nos prêts n'est pas satisfait.
Nos nouveaux interlocuteurs ne sont ni efficaces, ni très affairés à trouver une issue favorable.
Peut-on tout annuler?
A quoi nous exposons nous?
Vous remerciant pour votre réponse.