Gros soucis d'humidité, litige avec bailleur

Bonjour,
Nous habitons une vieille maison au bord de la mer.Nous y sommes rentrés en déc 2006. Fin de l'hiver 2007/2008, nous avons remarqué que de la moisissure apparaissait dans un coin de notre chambre qui est situé à l'étage mais aussi dans la salle de bain et la cuisine qui se trouve cote à cote au rez de chaussé.Juste, une précision, cette maison n'a pas de gouttières et c'est du simple vitrage, partout.
Nous avons prévenu oralement nos propriétaires, le 1er mai 2008 qui nous avait dit mettre un coup d'hydrofuge sur la maison, cet été. Ils n'ont rien fait. De là, nous avons envoyé un AR pour leur signaler que l'état de la maison emprirait et qu'il était grand temps d'entreprendre des travaux. Nous l'avons signaler aussi à l'agence (c'est eux qui nous ont dit d'envoyer un AR au proprios).
Les proprios ont réagis tout de suite au courrier et nous ont demandé de venir voir les lieux, ce que nous avons accepter. A peine arriver sur les lieux, ils nous ont dit que c'était affreux de voir une maison dans cet état et que c'était certainement de notre faute, par manque d'aération ou de chauffage. hors nous leur avons prouvé que nous chauffions régulièrement par des factures mais pour ce qui est de l'aération,nous n'ouvrons pas tout les jours car il fait froid et que justement nos enfants sont très souvent malades!!! le plus jeune qui a 22mois nous a fait 3 bronchiolites, l'hiver dernier, et cette année, on en est déjà à la 2ème.
Suite à cette entrevue, les proprios ont fait venir l'agent immobilier pour faire constater les dégâts, il a tout pris en photos. Maintenant, les propriétaires ne veulent rien débourser et nous laisser prendre tout en charge.Nous sommes tellement perdus que nous ne savons plus si c'est de notre faute ou non? Notre assurance parle de faire déplacer un expert mais si c'est de notre faute par manque d'aération, est ce que l'expert sera à notre charge? Est ce que de l'humidité à ce point (car c'est pire maintenant, les murs moisissent, les tapisseries se décollent, le platre s'effrite, la peinture aussi) peut être du à une mauvaise utilisation...... Nous ne savons plus que faire, doit on partir tout en refaisant, tapisseries etc .... sachant que le plus dure est notre situation financière délicate et donc nous permet pas de prendre tout à notre charge....Aidez nous s'il vous plaît......