Agence qui nous menace et refuse nos heures de visites

Bonjour,

Mon conjoint et moi sommes sur le point de quitter notre logement. Celui-ci sera vide pendant un mois car mon conjoint démarre un nouveau travail à deux heures de là et nous emménageons donc sur place.
Pendant le mois où l'appartement sera vide, notre agence voulait récupérer les clés mais nous refusons car tout dégât fait pendant les visites nous priverait de notre caution.
La semaine, mon conjoint travaille de 8h a 19h et moi je n'ai ni permis ni véhicule. Difficile donc d'assurer les visites car cela nous ferait arriver à plus de 21h sur place, ce que l'agence refuse. De même, mon conjoint étant en période d'essai, il ne va pas s'amuser à demander des heures pour s'eclipser. Comme nous sommes de bonne foi, nous avons proposé à notre agence des visites le samedi toute la journée afin qu'ils puissent louer rapidement. Résultat: la directrice nous a dit que nous étions des malades (si, si) et qu'elle ne faisait aucune visite le samedi alors que son agence est ouverte. Elle menace de noter chaque éventuel locataire perdu et de nous faire payer le manque à gagner.
Nous sommes démunis car nous avons été des locataires exemplaires et nous voilà menacés de sanctions judiciaires.
Comment pouvons nous défendre (si c'est possible)?