Remboursement

Bonjour,
J'ai loué un appartement il y a 3ans et j'ai eu droit a l'apl qui était de 284euro versé directement tout les mois au propriétaire, 8mois après j'ai décidé de quitté cet appartement tout en restant dans la loi avec le propriétaire J'ai donc emmené mon préavis pour que la caf ne lui verse plus d'apl ce qui n'a pas était fait puisque pendant plus de 6mois ils ont continué a versé a mon propriétaire en sachant que je n'était plus dans l'appartement puisque tout était en ordre avec mon agence( préavis, Bail, ect ...) , et aujourd'hui on me demande de remboursé une somme que je n'ai pas perçu puisque c'était versé directement sur le compte de mon propriétaire.
Ai-je droit a un recours ou autre?!! Car je trouve sa injuste de remboursé une somme que je n'ai pas perçu.