Servitude de passage

Bonjour, je suis propriétaire d'une maison mitoyenne par un côté avec une cour privée devant, cette cour donne accès à mes 2 voisins ( qui ont la possibilité d'avoir un autre accès chez eux...par le jardin ou la voie publique). Cette servitude concernait un droit de passage à brouette pour accéder à un puits dans le jardin. Après vérification, le puit n'est pas dans mon jardin. Puis-je faire annuler ce droit de passage ?