Travaux et limite de propriété

Bonsoir,
mes voisins m'empêchent de finir les travaux de ma maison (permis de construire ok) en n'accèptant pas que je travaille sur le pignon qui leur fait face et qui est en limite de propriété.
Dans quelle mesure sont-ils dans leur droit ?
Merci d'avance de vos réponses !