Comment annuler un compromis?

Bonjour,
Le 4 Aout nous avons signé mon mari et moi un compromis d'achat pour un terrain dans un lotissement communal.
Nous étions persuadé (le notaire et le maire nous l'on dit: nous n'avons pas de preuves concernant ces faits puisque cela avait été dit dans une conversation !!) que le terrain était viabilisé (avec le tout à l'égout) cependant après avoir bien lu le compromis, il s'avère que le terrain doit être aménagé d'une fosse toute eaux.

Malheureusement, lorsque nous nous sommes aperçu de cela, les 7 jours de rétractations étaient passés. Nous ne voulons plus de ce terrain, car trop onéreux puisqu'il faut rajouter une fosse!
J'aimerais savoir ce que nous devons faire pour éviter de payer des frais ou alors très peu.
Merci d'avance