Passage sur terrain

Bonjour,

Notre Usufruitier a autorisé un voisin, qui a déjà un accès direct et large par la route (en contre-bas), le passage par et sur "notre terrain" pour accéder à son entrepôt de magasin en empruntant un autre chemin et ce, depuis sept ans bientôt.
Nu-propriétaires, nous n'avons été informées que l'année dernière de la situation et nous avons réagit aussitôt et c'est d'un commun accord (Nu-propriétaires) que nous avons adressé une lettre R.A.R à "ce Propriétaire", dans laquelle nous avons demandé la remise en état de la petite butte de terre (applanie depuis) et la pose du grillage (enlevé depuis), qui servait à la séparation de nos terrains et en réponse, ce voisin nous dit << J'ai reçu l'accord de M. ---- pour passer avec notre camion et nos engins >>.

A quoi pouvons-nous nous attendre plus tard quand notre "Usufruitier" décèdera (87 ans), pourrons-nous faire supprimer ce passage ou est-ce que ce Propriétaire et voisin, qui a profité de la situation du fait que nous n'habitons pas sur place et n'avons aucune communication avec cet Usufruitier, pourra exiger de conserver cet accès ?
Je souhaiterai connaître les dispositions à prendre pour que notre parcelle de terrain puisse, si possible, retrouver son état d'origine.
Avec mes remerciements.

Cordialement.