Caution après vice caché après EDL d'entrée

Bonjour, voilà j'ai emménagé d'as un appartement il y a moins d'un mois sauf que 3j après la signature du bail et de l'EDL j'ai constaté un infiltration (quasi tropicale sans exagérer..) 8L d'eau à éponger dans la cuisine après des pluies. Bref j'arrive à faire accepter au bailleur une date d'EDL de sortie mais celui-ci me prévient que la caution ne pourra m'être restitué le jour même. Quand pensez vous ? Au vu des circonstances et du type de bailleur je risque de perdre ma caution et avec les frais de redemenagement j'en ai vraiment besoin.. Pourriez vous me confirmer ces dires, ou ai-je raison de réclamer immédiatement ma caution ?
Merci d'avance !