Problème de mur!!!

Bonjour,
J'ai acheté une maison en 2008. Il y a un mur qui sépare ma propriété de celle de mon voisin. C'est un vieux mur en pierre d'environ 1 mètre de haut qui ne cache pas le vis a vis. Je voulais le détruire car je compte agrandir ma maison a cet endroit. Voila que le voisin me dit que ce mur lui appartient! Lors de l'achat de ma maison l'agent immobilier m'a pourtant certifié que ce mur m'appartenait. Sur les plans cadastre on voit juste la limite de terrain mais dire si le mur est a moi, au voisin ou a nous deux??? Ou puis je me renseigner? Help !!! Merci d'avance!