Vendre sa maison directement malgré un mandat de vente avec agen

J'ai souscrit un mandat de vente non exclusif avec une agence voilà un mois. Je viens de trouver un acheteur qui n'a pas visité la maison avec l'agence. Nous sommes tombés d'accord sur le prix. M'est-il possible de vendre ce bien directement alors que le mandat de vente m'oblige de respecter un délai minimum de 3 mois avant de rompre le contrat avec cette agence ?
Si cela est possible à quel moment dois-je aviser l'agence ?