Brise vue sur le grillage du voisin

Bonjour,
j'aurai besoin de vos conseil,voilà mes voisins sont sourds et muets et ils se croivent tout permis en effet j'ai installé une brise vue sur le grillage qui nous sépare et il dit que ça lui appartient donc il veut que je l'enlève ,mais cela fait 3 ans q'elle y est .Alors que faire car lui meme a mis un abris de garage et de bois sur mon mur de maison et je n'ai jamais rien dit .Que faire? merci de votre réponse