Proposition d'achat contre signé par vendeur

Bonjour,

J'ai visité un appartement avec une agence (Agence 1) et ai signé un bon de visite. Ce bien m'a beaucoup plus.
Le vendeur n'avais qu'un mandat simple avec l'agence.
Ayant vendu mon bien avec une autre agence (Agence 2), celle-ci me propose alors de prendre en charge l'achat de mon bien future, afin de me faire gagner 50% sur les frais d'agence. Je leur parle alors du bien que j'ai visiter avec l'autre agence, et ceux-ci prenne alors contact avec le vendeur. Après accord du vendeur, je fais une proposition par l'intermediaire de l'agence 2. Cette proposition est acceptée et contresignée par le vendeur.
Le jour de la signature du compromis, le Vendeur, me dit qu'il ne peux pas signer car je suis engager avec l'agence 1.
Pour moi il me semble qu'avec un mandat simple, je peux passer par n'importe quelle agence et qu'à partir du moment ou la proposition est accepté par le vendeur, la vente peut être réaliser sans pour autant verser d'indemnitées à la première agence ayant effectué la visite.

Pouvez vous me dire ce qu'il en est et quels sont mes droits.