Negotiation directe après contact agence

Bonjour
J'ai recemment contacté une agence pour visiter une série de maisons. Leur ayant indiqué par email une liste de maisons que je souhaitai visiter, ils m'ont répondu dans le cas d'une maison qu'elle était éloignée selon mes critères (30 minutes de l'école pour mes enfants), et je leur ai répondu qu'alors je ne souhaitai pas la visiter. Je précise aussi au'ils ne m'ont pas non plus envoyé d'email spécifique sur cet maison, ni photo ni renseignement sur sa localisation spécifique. J'ai fait avec eux les visites des autres maisons, constaté par un bon de visite.

Depuis, j'ai trouvé sur un site internet l'annonce directe du propriétaire de cette maison. Après l'avoir contacté, je me suis rendu que cette maison nous convenait en terme de distance - se trouvant non pas à 30 mais à 15-20 minutes de l'école. J'ai visité la maison avec le propriétaire. Elle m'interesse et je souhaite entrer en négotiation directe avec lui, ne me sentant pas lié à l'agence, puisque nous n'avions fait qu'évoquer cette maison.

En conclusion: je n'ai pas visité cette maison avec l'agence initialement contactée, comme démontré par le bon de visite, et leur avait dit explicitement par email que je ne la visiterai pas avec eux. C'est parce que j'ai vu l'annonce directe du propriétaire, et que je l'ai contacté, que je me suis rendu compte que cette maison m'interessait, contrairement à ce qu'avait indiqué l'agence. Il me semble que, ni juridiquement ni même "moralement" je ne peux être ensuite attaqué par l'agence s'ils réclamaient le paiement de frais d'agence. Qu'en pensez vous? Merci d'avance