Retour sur charge du proprio fin de bail ?

Bonjour,

J'ai quitté l'appartement que je louais il y a trois mois en bon terme avec mon propriétaire, j'ai refais ce qu'il m'a demandé de faire mais au moment de me rembourser mes 2 loyers de caution (au bout du bout des deux mois qu'il avait pour me rembourser évidemment déjà, mais là n'est pas le problème), puisqu'il ne pouvait rien redire sur l'état des lieux il me fait un rappel sur charge de 700E !
Je sais qu'il a le droit de remonter en arrière jusqu'à 5 ans selon la loi, mais ne doit-il pas justifier ces frais d'indexations ? Par exemple il y a deux ans il me dit dans un courrier qu'il ne me fait pas d'indexation car je lui ai signalé que la rambarde qui entoure ma terrasse est en mauvais état et que cela peut-être dangereux. Il me répond qu'il le fera l'année suivante. Résultat l'année suivant rien n'a été fait, je déménage, et quand je lui envoie une lettre gratinée sur ses frais d'indexation à retardement, il prends pour prétexte la rambarde... qui n'a jamais été faite !
Qu'elle peuvent être mes recours désormais ?

Merci d'avance.