Logement insalubre

Bonjour à tous
Je me permets de vous poser cette question car je ne sais pas où m'adresser.
J'ai vécu 6 ans dans un logement insalubre, la caf a fait le déplacement et a fiche cette maison. Humidité importante, moisissures, chauffage insuffisant (nous avons acheté un poêle à nos frais) électricité non conforme avec fils apparents, rats et souris grouillent dans les murs et planchers nous les entendions se battre(maison en torchis) fuites d'eau importantes, la maison s'affaisse. Je lui ai demandé par recommandé de réparer ces fuites, il n'a jamais rien fait les factures d'eau sont importantes ( j'ai des vidéos en ma possession). Nous avions fait des travaux pour notre confort le propriétaire devait les déduire des loyers. Nous avons quitté lieux à sa demande car il souhaite vendre à sa belle famille mais nous avons reçu un huissier à notre nouveau domicile nous demandant des payer les loyers dus ( travaux non déduits des loyers). J'aimerais savoir si je peux entreprendre des démarches contre cette personne ? Il n'a pas tenu parole.
Je vous remercie
Bonne soirée
Cordialement