Demander un remboursement de loyer pour non jouissance du logement

Bonjour,
Nous vivons dans un T3 depuis 3 ans et il y a 2 ans nous avons eu un énorme dégât des eaux sur un des murs du bâtiment avec un affaissement de 2 poutres porteuses sur les 6 présentes qui ont été renforcées par 8 étais.
Suite à différentes expertises, les murs sont humides à 50% et il y a une grande quantité de salpêtre présent sur tout le mur qui a subit le dégât des eaux.

Le résultat est que cela a détruit les deux grands placards de 3m2 chacun (seul rangement disponible dans l'appartement). le mur endommagé est exposé a l'air dans l'appartement.
Nous avons dû aussi utiliser une des deux chambres comme placard durant 2 ans.

Aujourd'hui notre bailleur estime que les travaux ne sont pas urgents, les poutres ayant été sécurisées. Coté confort et jouissance de l'appartement rien d'urgent pour eux.

Étant en télétravail tous les deux depuis mars 2020 nous avons posé la question de l'exposition au salpêtre continue. Nous n'avons eux aucun retour du bailleur ainsi que de notre assureur...

Je voulais savoir s'il y avait un moyen de récupérer une partie du loyer ne pouvant jouir pleinement du logement depuis 2 ans entre la perte d'espace des placards et l'utilisation de notre 2e chambre en tant que placard de substitution.

En vous remerciant pour vos éventuels retours sur notre cas