Terre agricole

Bonjour, ma situation est tres compliqué j'ai hérité de terre agricole au décès de mon père, les terres étaient louées a un agriculteur qui ne ma jamais payé de fermage depuis le décès, mon père avant sa mort avait déjà entamée une procédure avec un avocat mais vu quil est décédé cela cest arrêté, cet agriculteur n'entretenait pas les terres, avant il y mettait des betes mais mon père ne voulait plus quil en mette car il avait fait faire un nettoyage du terrain par un entrepreneur car il y avait un ruisseau naturel qu'il a fait nettoyer des ronces partout quil a fait enlever etc.... et donc facture salé pour mon père... Voilà ma question les terres sont maintenant a moi depuis 2017 cet agriculteur avait ses terres depuis des années payer le fermage a mon père.... mais a moi jamais un paiement une fois par an il y a quelqu'un qui fait le foin a sa place, jai fait faire un certificat urbanisme sur les terres ou 1 hectare est devenu constructible et l'autre rester en agricole j'ai eu une seul fois depuis cette personne au téléphone mais ne veut pas me les rendre, la je met mes terrain en vente et je sais qu'il me mettra des bâtons dans les roues, comment faire pour etre sur qu'il ne me bloque pas pour la vente ou autre et le discours avec lui est tres difficile car je sais que lui touche de l'apac sur ses terres.
Merci de me m'éclairer un peu si vous le pouvez