Concurance deloyale

Bonjour,
Je suis salarié dans une entreprise de sécurité depuis bientôt 20 ans, j'ai crée ma micro entreprise dans le même domaine depuis 5 ans aujourd’hui en accord avec mon entreprise actuel.
A ce jour il y a un client qui souhaite résilié le contrat et souhaite faire une collaboration avec moi car depuis quelque temps mon entreprise pour qui je travaille fond des boulettes sur boulette et il en a marre.
Si j'accepte de travaillé avec lui je sais que je ne dois plus faire parti de l'effectif pour qui je travaille mais j'ai peur qu'il m'attaque pour concurrence déloyale ou autre sachant que que ce n'est pas moi qui a démarché le client mais lui qui est venu a moi.
Que dois je faire pour être dans les règles.
En vous remerciant