Dois je remboursé ?

Bonjour,
Bonjour,
J'ai loué un appartement F2 à un jeune homme. Durant sa location il a entreposé du bois mort infesté de termites contre une porte en bois sous la veranda pour faire son barbecue. Après plusieurs jours, je m'en suis apercu, je lui ai fait la remontrance et je lui ai demandé de retirer le bois de là. Ce qu'il à fait. Quelque jours plus tard, il me signale que la baguette qui sert de joint entre le bati et le mur est pourrit et infesté de termites. Je lui ai demandé de traité le bati et de remplacer la baguette. A son départ le 30 novembre 2012 il n'avait pas remis la baguette et sur l'état des lieux j'ai noté "etat tres bien", "baguette à peindre et placé". Lui demandant de revenir dans la semaine remettre la baguette. Lorsqu'il revint placer la baguette, lui meme me fait voir que sous la lasure tout l'interieur du bati est pourrit et est infesté de termites. Je lui ai donc demandé de me remplacer le bati, ce qu'il à refuser. J'ai du faire les reparations moi meme, ce qui couté 632,00€. Ca caution s'elevait à 620,00€
Sous pretexte que j'avais noté que les huisseries etaient en bonne etat, il me reclame sa caution sous un mois. Le delais legal des deux mois etant dépassé. Il me menace de m'amener devant les tribunaux.
Que dois je faire? Que prevoit la loi dans ces cas la? Je ne pouvais voir de visu que le bati etait infesté lors de la visite. Y a t'il un texte de lois qui protege le propriétaire contre ces vices cachés, ou contre les problemes qu'on ne peut voir qu'apres le départ du locataire.
Merci de me répondre.