Litige avec propriétaire

je loue un logement depuis 1 an et demi avec mon compagnon qui a des problèmes d'allergies et depuis quelques mois son allergie se réveille et nous avons découvert de la moisissures dans plusieurs pièces (il est allergique aux acariens et à la poussière) nous avons perdu un canapé et plusieurs vêtements qui avaient des tâches de moisi, nous avons contacté le propriétaire qui a dit que c'était de notre faute, ne pouvant plus habiter sur place pour raison de santé nous avons donné notre préavis, le propriétaire est venu avec quelqu'un et ils ont trouvé une fuite au toit donc a reconnu que ce n'était pas de notre faute puis à fait venir quelqu'un d'autre qui s'est aperçu que la vmc ne fonctionnait pas, mais après tout cela il se dédit et dit que c'est notre faute. Au bout du premier mois de préavis nous avons été contraints de partir raison santé, dans ce même mois le propriétaire à essayer de rentrer à l'aide de ses clés chez nous car il pensait que nous n'étions pas là, puis est rentré sans nous prévenir une autre fois, nous avons le témoignage du voisin et le propriétaire a bien dit qu'il était venu, nous voulons en finir avons payé le 2ème mois alors que nous n'habitons plus dedans mais ne pouvant pas financièrement payer un loyer + un autre pour être reloger nous nous trouvons dans une situation difficile, le propriétaire m'appelle et me parle méchamment nous lui avons dit de garder la caution comme dernier mois de loyer et il a dit qu'il nous mettrait au tribunal, il espère garder la caution pour effectuer ses travaux.
Je me suis retrouvée hospitaliser pour étourdissement et perte de mobilité et de la parole temporaire, je ne peux toujours pas marcher plus de 3 minutes d'affilées, on cherche mais cela viendrait du stress que cette situation occasionne, comment faire pour que cette situation se résolve au plus vite.