Acheter une maison sans agence immo

Bonjour, j'ai visite une maison avec un agent immobilier qui pour le moment à l'exclusivite. l'agent immobilier ne m'a fais signer aucun papier, aucune trace ecrite de ma visite. maintenant je suis en relation avec le propriétaire son mandat et bientot finis donc je souhaite passer directement la vente avec lui, mais le propriétaire ma dis que dans son contrat il y a une clause qui stipule que si un acheteur viens visiter la maison avec l'agence , celui-ci ne plus acheter directement avec le vendeur. mais une fois que le mandat est terminer le vendeur peux vendre sa maison a qui il veux quand meme? de plus je n'ai rien signer avec l'agence immo... la clause du contrat est-elle valable quand meme? que puis faire?