Retenu pour régularisation de charges ultérieures : sans régularisation...

Bonjour,

J'ai loué un appartement meublé de septembre 2016 à juillet 2017, j'ai signé mon contrat au près d'une agence qui avait le bien en gérance.
Mon départ a fait suite à la volonté de la propriétaire de récupérer le bien pour son propre usage.

A mon départ, l'agence a retenu 20% du dépôt de garantie au titre de prévision pour régularisation ultérieure des charges (comme la loi l'y autorise).

Je n'ai cessé de les relancer depuis, afin d'avoir cette fameuse régularisation, et justificatifs.
L'agence m'a d'abord dit que les comptes n'étaient pas arrêtés et qu'il fallait attendre 2018.
Puis l'agence m'a annoncé que n'étant plus gérant de l'appartement, ils ne pouvaient plus intervenir sur le dossier.
La propriétaire s'est également dédouanée de toute responsabilité en expliquant qu'elle n'avait jamais gérée l'appartement et donc qu'elle n'avait pas connaissance de la chose. Elle s'est fortement énervée, m'a demandé d'arrêter de la contacter.
J'ai donc demandé à l'agence d'être professionnelle et de régler cette histoire avec la propriétaire.

En Mai 2018, j'ai enfin eu le responsable de l'agence au téléphone, qui m'a dit qu'ils allaient s'en occuper car la propriétaire était un peu perdue, mais qu'il avait besoin de recevoir les pièces comptable de 2017, qui ne seraient disponibles que fin 2018.

Nous sommes en février 2019, j'ai relancé l'agence la semaine dernière par email et ils ne me répondent pas.
Que faire ?
L'engagement de l'agence de s'occuper de cette histoire était par téléphone, je n'ai pas de traces écrites (de mon côté j'ai sauvegardé tous les mails envoyés et reçus).

Quand je lis les articles de loi, il est partout écrit que le bailleur peut retenir 20% pour régularisation ultérieure, mais je ne vois nulle part le délai maximum pour effectivement régulariser ??
Il s'agit de plus de 300€ qui ont été retenu, et je ne veux pas abandonner (le responsable de l'agence m'avait même dit qu'a priori j'avais de base payé plus de charges que nécessaire !).

Merci pour votre aide