Achat direct avec particulier avant bon visite

Bonjour,
Je viens vers vous pour un cas de conscience. Nous avons visité un bien avec une agence : ce bien ne nous convenait pas mais l'agent immobilier devenant notre mandataire se charge de nous en trouver un autre. Le hic c'est que le 2e bien qu'il nous propose nous plaît beaucoup et que nous le connaissions avant lui. Nous souhaitons donc conclure un éventuel achat en direct avec le propriétaire en annulant le RDV fixé avec l'agence.
Est-ce juridiquement correct ? Et est-ce moralement convenable ?
Merci.