Décés d'un locataire célibataire avec enfants mineurs

Bonjour,
Mon ex conjoint est décédé le14/09/2016. Nous avons eu 3 enfants encore mineur aujourd'hui. Nous avons effectué l'état des lieux le 10/10/2016. Aujourd'hui je reçois un courrier des HLM me demandant de payer les frais de remise en état de la maison ainsi qu'un loyer supplémentaire soit une somme de plus de 2000 euros . Dans cette dernière figure le changement de papier peint, la peinture des plafonds, les joints en silicone (bref de l'usure normale)Nous nous sommes séparés le 24/10/2015 et depuis ce jour j'ai la garde de mes enfants.
Nous sommes rentrés dans la maison en aout 2002.