Changement d'agence suite refus de prêt

Bonjour,
j'ai signé un compromis de vente par l'intermédiaire d'une agence. Le prêt a été refusé.
Une autre agence avec qui j'ai visité cette maison propose un prix moins élevé et moins de frais d'agence ( ce qui revient moins cher pour nous et qui laisse plus d'argent au propriétaire ). Le propriaitaire étant d'accord, peut-on ressigner un compromis de vente par l'intermédiaire de l'autre agence, sachant que le prêt serait cette fois-ci accepter, sans que l'autre agence, qui ne veut pas baisser ses honoraires exorbitants, puisse nous attaquer?