Peut-on supprimer les apl a mon propriètaire?

Bonjour,
je loue un logement depuis plus d'un an avec 3 enfants en bas ages, mon propriètaire perçoit les apl sur sont comptes, hors depuis la signature du bail il doit effectuer des travaux dans le logement ( problemes d'isolations, fissures des murs, sols pas droit, l'eau de pluie rentre par les vitres.... ), de plus l'état du logement nuit a la santé de mes enfants. Est-ce-que je peux demandé a la caf de ne plus versé les apl sur sont comptes mais sur le miens pour l'obliger a faire les travaux? je vous remercie de vos réponses