Mon locataire m'envoie un courrier après avoir quitté son logeme

Bonjour,
Mon locataire a quitté son logement sans préavis, du jour au lendemain. une semaine après il m'a envoyé un recommandé (auquel je n'ai pas répondu) me remerciant de l'avoir dispensé du préavis, or je ne l'ai jamais dispensé de quoi que ce soit. Il a remis les clefs dans les escaliers de l'immeuble à mon mari et aucun état des lieux de sortie n'a pu être fait. l'état des lieux d'entrée n'a pas été signé non car de nouveaux meubles devant être installés, il était convenu que l'état des lieux d'entrée serait signé après mais cela n'a pas été fait, le locataire est resté 4 mois dans ce logement mais l'agence qui s'est occupé de la location est témoin que le logement était parfait.
Le logement n'a pas été nettoyé, il m'a fallu plus de 4 h pour tout remettre en état, de plus des travaux de réparation ont du être fait pour un montant de 550 € (coup de poing dans le mur, brûlure,saleté, BZ taché et pied cassé, boite à lettres cassée, frigo micro onde non nettoyé ....). je ne lui ai donc pas rendu sa caution. Il m'a envoyé un recommandé réclamant sa caution auquel j'ai répondu que vu l'état du logement je ne lui rendrais pas. Il me poursuit au tribunal, il semblerait que le fait de n'avoir pas répondu à son 1er recommandé où il précise que je le dispense de préavis est considéré comme un accord. Est-ce vrai ?