Autorisation de passage pour une construction neuve

bonjour, je cherche à savoir si mon voisin qui fait construire une maison sur la parcelle attenante à mon jardin à le droit de d'annexer mon jardin pour faire faire ses travaux.
Il a décidé de faire son mur en limite de propriété et maintenant que ses travaux commencent, il m'annonce qu'il va devoir prendre une bande de 2m sur mon jardin pendant 8-10 mois pour faire réaliser ses travaux (sans me proposer d'indemnité en plus). En fait il a besoin de passer par chez moi pour faire réaliser l'étanchéité de son mur car mon terrain est surélevé d'un bon mètre par rapport au sien. Il veut donc faire une tranchée dans mon jardin pour accéder à son futur mur et en faire faire l'étanchéité. Ensuite il veut l'espace pour installer un échafaudage et pouvoir en faire le tour pour faire la finition du mur.
Devant sa démarche très "cavalière" de s'imposer chez moi (et sans proposer de compensation) je suis très réticent à lui donner mon autorisation. a-t-il réellement un droit ? les servitudes de tour d'échelle ne semblent valable que pour les constructions existantes. Quand est-il pour une construction neuve ? puis-je m'y opposer sans que cela semble abusif (alors qu'il a obtenu son PC avec ce mur en limite de propriété ? j'estime qu'il aurait pu faire son mur légèrement en décalage pour pouvoir faire faire le nécessaire pour l'étanchéité en restant de son côté.