Refus de remboursement Caution

Bonjour,
Mon ancien propriétaire refuse de me rembourser a priori la caution sous prétexte que l'appartement est en très mauvais état. Le problème c'est que l'agence par qui je suis a fait l'état des lieux d'entrée et de sortie et elle a constaté l'état général propre de l'appartement et a signalé de très petites choses (type joint de robinet, trous dans les murs de la cuisine,et...). Il y a donc désaccord total entre l'agence et le propriétaire. Je n'ai pas encore reçu la lettre du propriétaire et le délai légal expire dans quelques jours. Je souhaiterais savoir si après avoir envoyé une lettre recommandée avec accusé de réception et un délai de 8 à 10 jours comme suggéré je dois directement saisir le juge de proximité du tribunal d'instance dont je dépends ou dois-je passer plutôt par une association de consommateurs ou bien l'ADIL de Paris.

Je vous remercie par avance pour vos réponses.

Cordialement.