Litige sur un contrat

Bonjour
Mon ami et moi avons eu la visite d'un commercial pour la pose de panneaux photovoltaïques. Nous avons été séduit par l'offre et nous avons signé le contrat avec lequel s'associait un crédit bancaire afin de financer le projet.
Après réflexions, nous avons décidé de nous rétracté. Nous avons donc envoyé le bordereau de rétractation à la banque dans les délais. Malheureusement, par manque de vigilance il y avait un autre bordereau a envoyer à la société qui installe les panneaux. Mais lorsque nous nous en sommes aperçu le délai de rétraction était passé. La société nous menace, et dit que nous sommes obligés de payés les frais d'annulation s'élevant à 9000 euros. Nous avons contacté la banque (banque où le crédit devait avoir lieu) qui nous indique qu'à partir du moment où l'offre de crédit est annulé cela induis automatiquement une annulation du contrat. Je voulais savoir si d'un point de vue légal cela était juste. La société peut elle nous contraindre à payer?
Merci beaucoup