Droit de passage

Un voisin dispose d'un droit de passage, pour lui et ses ayants droit, sur ma propriété, depuis 1990, pour accéder à un garage ( qui n'a jamais été construit depuis).
Le nouvel acquéreur de cette propriété veut y construire 13 garages.

Ce qui, à mon sens entraine une modification de la servitude.

Suis-je obligé d'accorder le droit de passage à ses 13 futures locataires?

Cet argument peut-il me permettre de contester le permis de construire.