Mur du voisin en retrait et poursuite au civil

Bonjour,

Je suis en litige avec mon voisin, et j’aimerai avoir des conseils sur la suite à donner à mon affaire.

IL y a maintenant 3 ans, j’ai fait une déclaration préalable de travaux pour un abri de jardin situé en limite séparative. Une église classée est dans mon secteur, et donc tous travaux sont soumis aux architectes des bâtiments de France. Ma déclaration a été acceptée.
La limite séparative avec mon voisin est composé d’un mur non mitoyen, et j’étais donc sensé me coller en limite séparative et donc contre le mur de mon voisin, simplement, le haut du mur possède un chaperon dépassant de 11 cm du mur (donc théoriquement 11 cm sur ma propriété). Pour ne pas faire d’histoire, je décide de décaler mon abri de 50 cm du mur afin de pourvoir entretenir l’arrière de mon abri et mon voisin le mur le jour où il y aurait besoin.
1an et demi après la mise en place de l’abri, mon voisin fait un courrier à la mairie comme quoi je n’ai pas respecté mon autorisation. Je demande donc une conciliation avec le maire et mon voisin afin de comprendre ce qui gêne pour mon voisin (sachant que son mur fait 2,40m et qu’il ne voit pas mon abri depuis sa propriété).
Pendant la conciliation mon voisin exige que je respecte mon autorisation ou que je déplace mon abri. Je lui fais remarquer que son mur me gêne pour respecter mon autorisation et qu’il devra enlever son chaperon, pour que je déplace mon abri. Mon voisin ne veut rien savoir, il me dit que le mur est en retrait de la limite séparative et qu’il ne touchera pas à son chaperon. Le maire et moi lui demandons en quoi mon abri le gene puisqui distant de son mur et qu’il ne le voit pas de sa propriété. Je n’ai pas obtenu de réponse hormis « mettez-vous en règle avec le PLU ». Le maire et moi avons donc compris que mon voisin voulait simplement me nuire. La conciliation est donc un échec. Je pensais que les choses en resteraient là ; mais 6 mois plus tard, je reçois un courrier du tribunal de grande instance, car mon voisin me poursuit en justice.
A partir de là , je m’intéresse un peu plus au mur de mon voisin, au PLU, … Je m’aperçois que mon voisin à construit son mur il y a 5 ans sans faire de demande d’autorisation à la mairie et au architecte des bâtiments de France, qu’il ne répond pas aux règles du PLU, car il avait le droit de faire une clôture d’1m80 maximum, et non d’un mur en agglo de 2,40m. Le mur est en retrait alors qu’il devait être en limite séparative, que le chaperon dépasse quand même sur ma propriété, et d’autres manquement au PLU. (pour ne parler que du mur car il fait d’autres construction sans déclaration et à meme ammenagé des combles sans autorisation, mais ceci ne fait pas partie de l’affaire)
Le jour du RDV devant le tribunal, le juge nous demande de faire une médiation, et je dois faire une proposition, pour nous « arranger ». Je suis allé voir le maire, et la responsable de l’urbanisme de la communauté de commune dont je dépens, Les 2 sont unanimes sur le fait que la seule solution valable pour moi est soit de déplacer mon abri de jardin ou de me mettre en limite séparative comme prévu initialement. Ils me confirment également que le mur de mon voisin a bien été construit de façon illégale.
J’ai donc transmis à mon avocat mon intention de me mettre en limite séparative, j’ai appris par avocats interposés que mon voisin acceptait cette solution, à condition que j’installe une protection en polystyrène contre son mur (soit chez lui puisque le mur est en retrait), et qu’il était hors de question de toucher au chaperon.
La médiation n’a pas encore eu lieu, mais je sais par avance que cela sera un échec car je refuse de faire des travaux chez lui (ce qui me parait logique), et que je ne serais toutjours pas en limite séparative à cause du chaperon qui dépasse chez moi, et que je refusais une solution "bricologe".
Je me demande maintenant si je ne vais pas demander la destruction du mur au profit d’une clôture comme l’exige le PLU. Ce voisin est tellement borné que je veux maintenant retourner la situation contre lui.

Voilà l’histoire, jusqu’ici le maire est resté passif dans cette affaire, mais à notre dernier RDV, le maire me dit qu’il va surement rentrer dans l’histoire si le voisin se borne à ne rien savoir …

Puis-je exiger la destruction du mur de mon voisin au Tribunal ?

Merci par avance pour vos conseils.