Droit accorder retour d'échelle à mon voisin sur du neuf

Suis-je obligé d'accepter de signer une demande de retour d'échelle que le maître d'oeuvre de mon voisin me présente, de la main à la main, pour pouvoir faire l'enduit de l'agrandissement de sa maison dont le pignon n'est séparé de notre propriété que par 10 cm? Actuellement, chez nous, la clôture mitoyenne est composée de petits poteaux béton de 1m haut avec du grillage rattaché sur ces poteaux. Le maître d'oeuvre souhaiterait détruire nos poteaux et le grillage afin de faciliter les travaux d'enduit, et ensuite, de chaque côté du pignon, se rattacher je ne sais pas comment au mur/maison du voisin en question. De plus, tout au long de cet agrandissement neuf, de notre côté, nous avons planté des lavandes très anciennes, diverses fleurs décoratives, deux arbustes à fleurs, et l'installation d'un échafaudage me fait très peur. Que me conseillez-vous de faire, s'il vous plaît??? C'est urgent !!! Merci.