Abandon familial

Bonjour, j'ai déclarer à la caf que mon mari Est quitté le domicile ça fait 2 semaines mais on ès encore marié .. le problème qu'il fait ça quand il veut et revient quand il veut donc j'étais en colère et je lui déclarer ..j'ai un bébé de 7mois
Et je vous annulé cette déclaration comment faire et qu'elles ont les conséquences qu'il peu faire la caf de moi ou mon mari ou notre bébé?
Merci