Résiliation d'un compromis de vente d'un terr

Bonjour,

En septembre dernier, mon ami et moi avons signés un compromis de vente chez un notaire, pour un terrain pour y construire une maison.
Nous sommes passés par un constructeur et avons signés un contrat de construction de maisons individuelles (CCMI).
Nous avons vus le terrain mais celui-ci était couvert de broussailles, épines...
Le propriétaire du terrain nous a prévenu l'existence de source, mais pas le fossé. Le propriétaire à nettoyer le terrain pour le rendre à "nu". A ce moment là, on s'est rendus compte l'existence du fossé.
A la signature du compromis, nous avons déposé un chèque de 3000€.
Le contructeur nous demande environ 14000€ de plus, que le prix de base signé CCMI pour des fondations particulières et l'évacuation des terres. Nous voulons pas verser cette somme car nous jugeons que le fossé est un vice-caché. Le permis de construire n'est pas déposé à ce jour.
Le délai des 3 mois arrive bientôt à écheance.

Quel recours avons-nous?
Peux-t-on refuser de signer l'acte authentique dans ces conditions et surtout sans que le permis de construire soit déposé?
Si oui, s'engage-t-on à des frais, pénalités ou poursuites?
Merci d'avance de votre réponse,