Jardin à l'abandon

Bonjour,
j'espère avoir votre aide, voilà, je suis arrivé en 2011 chez moi, je me suis aperçu que le jardin d'à côté était à l'abandon, avec un cerisier qui menaçait de tomber ...je me suis rendu à la mairie pour retrouver le propriétaire, qui, malheureusement est décédé depuis 86 et 92 pour son épouse, le fils, lui aussi est décédé, je n'ai retrouvé que 1 des petits enfants sur deux, j'ai fais des pieds et des mains pour racheter ce terrain, une demande de rachat aux domaines et forêt à été faite par la mairie et est revenu nulle car il y a des descendants, j'ai été aux impôts pour payer la foncière sur ce terrain, pas moyen, car le terrain appartient toujours à la personne décédée, la mairie ne veut pas faire son droit de préemption car emblavé, non constructible, et aucun accès pour des personnes étrangères au lotissement, seul 5 voisins peuvent accéder à ces jardins ...il manque un héritier qui est introuvable, le notaire demande des frais qui dépassent amplement le prix du terrain, moins de 2500 euros, l'héritier m'a fait une attestation comme quoi il me donne le terrain en attendant de faire mon droit d'usucapion, qui se fera en 2042, j'entretiens ce terrain de 75m² comme si c'était le mien depuis fin 2012, j'ai fais retiré le cerisier, changer la clôture quasi inéxistante, retourné le terrain et mis une nouvelle pelouse...la semaine dernière, j'ai reçu un coup de téléphone du propriétaire de la maison d'à côté, qui m'a menacé d'avoir fait violation de domicile, ( de terrain ) en me disant qu'il avait eu jouissance du terrain en arrivant en 1998 en achetant la maison ... il n' a pas d'acte sur ce terrain, j'ai pris des photos depuis le début, j'ai 3 attestations de voisins qui disent que le terrain était à l'abandon depuis plus de 20 ans, une attestation d'un des deux héritiers ... la mairie (urbanisme) me dit que cette attestation est légale...je ne sais plus quoi faire, je suis coincé pour racheter ce terrain, et le voisin qui me menace ...que dois je faire??? l'attestation a t'elle un pouvoir même si elle n'est pas signée chez notaire ( manque du deuxième petit fils) ...merci de m'aider de me donner vos avis
la maison voisine a été vendue en 83 par la personne décédée en 86 de son vivant, à distance, sans le jardin, la maison a été vendue 4 fois depuis ( j'ai eu l'historique de vente de la maison à laquelle ce fameux jardin aurait du être rattaché)