Servitude de passage

Bonjour à toutes et à tous !
Voici mon problème :
il a une servitude de passage sur mon terrain actée par le notaire dans l'acte de vente.
Cette servitude de passage n'est pas utilisable en l'état pour les propriétaires du fond dominant: Pour la rendre opérationnelle, les propriétaires doivent faire construire un pont au dessus d'une rivière après avoir décaissé fortement la servitude (mon terrain s'arrête à la rivière). Ces travaux vont occasionner beaucoup de nuisances pour nous (bruit, bulldozer, défiguration de notre terrain au delà de la limite de la servitude ect..).
Quels recours avons nous ?
Merci d'avance pour votre attention et vos réponses.