Droit de passage

Bonjour, j'ai acheter une maison avec cour cloturer avec un droit de passage il y a dix ans.je désire aujourd'hui vendre cette maison,j'ai proposais la vente au voisin qui a la proprièté du fonds servant qui lui n'est pas interesser d'acheter.par contre il me dit que depuis toujours ma cloture qui donne sur la servitude n'est pas au bonne endroit que il faut que je la deplace avant que je vende.est ce que g le droit de vendre sans déplacer ma cloture?

je vous remercie d'avance