Accusé de diffamation suite à plainte pour vendalisme

Bonjour,
Je vous expose ma situation. Etudiant, j'ai été victime d'un vandalisme il y a quelques mois sur mon véhicule. Les pneus ont été crevés alors que la voiture était stationnée au sein de mon immeuble. J'ai fait appel à mon assurance qui a mis en place un remorquage de la voiture, puis les pneus ont étés changés. J'ai payé une franchise d'un peu plus de 100 euros. J'avais dans un premier temps effectué un dépôt de plainte contre X à la police nationale comme demandé par l'assurance afin d'être dédommagé. Entre temps, j'ai appris que la place où j'avais garé ma voiture (sur laquelle il n'est fait mention d'un numéro de place ou de place privée) appartenait à un copropriétaire. Ce dernier ne possédant pas de voiture, elle est fréquemment utilisée par d'autres habitants. Je me suis donc intéressé à ce copropriétaire, qui par ailleurs ne m'avais mis aucun mot ou autres pour me signaler qu'il s'agit de sa place, et c'était la première fois que j'y stationnais. Je suis allé directement le voir et il m'a avoué que ce n'était pas une vengeance personnelle mais un acte motivé par l'exaspération que tout le monde utilise une place qui lui appartient sans son autorisation. Il n'a pas accepté un arrangement amiable et a ensuite décidé de se murer dans le silence m'ayant fait part de sa crainte que je l'enregistre. Le lendemain j'ai donc annulé ma plainte contre X et déposé une plainte contre lui. Suite à cette plainte adressée, il a été convoqué au commissariat et contacté par mon assurance qui lui demande de s'acquitter des frais causés par ses actes. Evidemment, il nie en bloc que ce n'est pas lui. Récemment, je l'ai croisé et je lui ai proposé de mettre un terme à cette histoire qui dure et je lui ai proposé une nouvelle fois qu'il me rembourse ma franchise et que j'enlève ma plainte. Il me dit que dans tous les cas il n'a ni l'argent pour rembourser l'assurance ni pour s'arranger à l'amiable avec moi et que dès que l'enquête sera close, il portera plainte contre moi pour diffamation.

Ma question est la suivante: Sachant qu'il s'agit de parole contre parole, comment pensez-vous que cette histoire se terminera si elle se termine un jour ?
Quels sont les risques que j'encours si il porte en effet plainte contre moi pour diffamation alors qu'il m'avait confirmé quelques mois plus tôt être l'auteur du vandalisme, et qu'aucun témoin n'existe ?

Je vous remercie par avance de vos lumières.
Cordialement.