Remboursement de caution

J'ai rendu mon logement debut janvier, sur l'etat des lieux, le propriétaire a indique que le logement était rendu en bon état. Cela va bientôt faire 2 mois, je lui réclame ma caution et maintenant, il me dit qu'il y avait des travaux à faire et il me retient une somme conséquente sur ma caution (que je n'ai toujours pas reçu). Est ce qu'il a le droit après qu'il ait inscrit sur l'état des lieux que le logement était en bon état ?