Logement locatif: Frais Retenus sur Caution

Bonjour,
Nous sommes locataires depuis 18 mois d'un appartement que nous allons quitter en Juin (suite à achat immobilier).
Lors de notre arrivée les murs et plafonds avaient été repeints.
Mais dès 6 mois des cloques ont commencé à apparaitre, nous l'avons signalisé à l'agence au bout d'un an. Nous avons mentionné un probleme d'humidité générale. Le batiment, un vielle immeuble des années 50 avec fenetres en bois, est très mal isolé. Dès qu'il pleut abondamment, nous avons des infiltrations d'eau dans le garage/cave. L'agence nous a repondu que les cloques étaient probablement dues au fait que nous n'aerions pas assez.
Aujourd'hui, il y a des cloques dans chaque piece d'eau (cuisine, WC, salle de bain), aux plafonds et aux niveaux des murs exterieurs ou cloisons interieures.
Nous estimons que ce problème de peinture est dû à un défaut du batiment et ne peut etre incombé au locateur.

Nous pensons que l'agence retiendra des frais sur notre caution pour frais de peinture.
Que pouvons-nous dire ?

Merci de votre aide juridique ou de votre experience des agences,