Achat après visite agence

Bonjour,

Je suis à la recherche d’un appartement à acheter.
J’ai visité un bien avec une agence qui m’a intéressé. Je n’avais pas signé de bon de visiter
En continuant mes recherches sur internet, j’ai vu que le bien était aussi mis en vente directement par le propriétaire. Après un échange, il m’a indiqué qu’il avait signé un mandat simple.
Ma question : si jamais je fais affaire avec le propriétaire directement , l’agence est elle en droit de faire un recours par la simple raison que j’ai fait la première visite avec elle ?
Merci