APL après la vente de mon logement

Mon propriétaire a vendu mon logement depuis le 23 avril 2019. Il percevait directement l'APL de la CAF au vu de mes faibles revenus. Le nouveau propriétaire Ne veut pas fonctionner comme ça et me réclame le montant total du loyer, alors que la CAF est prête à lui verser l'APL s'il envoie un acte notarié de vente de une attestation de versement direct. Il s'y refuse. Quels sont mes droits, sachant que je n'ais pas les moyens de lui payer le loyer entier, et que j'ai droit à l'APL?