Rachat de clientèle, escroquerie

Bonjour,
Actuellement gérant d'une société, après avoir travaillé plus de 3 ans avec un VRP sur un client important (il recevait tous les mois, ces commissions) nous avons décidé que je lui rachète pour 100K€ ce client. chose importante, le client n'était pas au courant de nos accords !

Tout a été acté par nos avocats respectifs et signé par nous 2. J'ai déboursé 2x50K€ en 2ans.

1 Mois après le dernier virement des 50K€, ce VRP s'est remis à travailler avec ce client en direct et le client n'a plus voulu retravaillé avec moi en direct comme il etait convenu avec ce VRP.

Ma question est de savoir si c'est légal pour ce VRP de retourner (après avoir touché ses 100K€) travailler en direct avec le client, si non quel serait mon recours ?
Chose importante, ce client représentait 60% de mon CA.

En vous remerciant par avance de vos réponses.