Contestation de limite de propriété

Bonjour,
Notre terrain est enclavé. Une servitude de passage a été créée afin de desservir notre terrain et les suivants, 4 mètres ont été pris sur notre terrain.
Face à nous, un terrain est loti en 3 parcelles. Pour réaliser cette opération le propriétaire s'est approprié 7 m² sur la servitude. Il a pu réaliser 3 parcelles : 2001 m² - 2003 m² -et 2004 m². La zone est à 2000 m². Sans cette appropriation, il ne peut réaliser que 2 lots.
En juin 2016 un géomètre mandaté par le lotisseur a établi un plan que nous n'avons pas signé, sur lequel nous avons clairement mentionné notre contestation des limites.
Nous attendions la désignation d'un expert judiciaire. Or depuis 4 jours un entrepreneur a débuté les travaux de construction d'une maison.
Que pouvons nous faire ? Quels sont nos recours ? Comment procéder ?
Merci de vos conseils