Voisin qui m empêche de vendre mon appartement

Bonjour,
Je possède depuis 20 ans un appartement dans lequel nous ne venons que les week-end, et même un week-end sur 2 souvent. Nous avons décidé de vendre cet appartement pour quelque chose de plus grand. Hors, lors de chaque fin de visite faite par l'agence, le monsieur du dessous sort de chez lui en agressant verbalement les visiteurs en leur disant que les appartements sont mal insonorisés et qu'il ne faut pas qu'ils marchent avec des talons.. Etc. Du coup ça décourage les acheteurs potentiels.
Si j'enregistre ce monsieur à son insu lors de ces interventions, cela peut il me servir si je dois porter plainte contre lui?
Sinon quel recours pourrais je avoir pour l'empêcher de nuire?
Merci d'avance pour vos réponses.