Puis-je annuler un compromis de vente?

Bonjour,
je souhaiterai savoir si je peux annuler un compromis de vente (prorogation qui s'achève le 15 novembre 2012).
Je vous explique: j'ai signé un compromis de vente pour un terrain de 431m2. Et là j'apprend que le terrain est classé (parce qu'il y a un monument historique dans les parages) et que donc certaines choses me seront imposées mais aussi que dans ces 431m2 il y a une petite partie qui appartient à la mairie (qui a demandé au propriétaire un bornage contradictoire). Cela étant, je pense ne plus avoir 431m2. Enfin au final je ne veux plus acheter ce terrain, je suis vraiment trop perdante (de plus cette parcelle coute tres cher pour le nombre de m2 qu'il ya, en effet le terrain devait à la base mesurer 450m2). Ai-je le droit d'annuler le compromis de vente et surtout me rendont-ils les 5000euros de depot? Est ce que le fait que la mairie demande un bornage contradictoire car un bout de cette parcelle leur appartient est une raison valable pour annuler le compromis car le propriétaire, quand il a fait mesurer la parcelle, a directement inclu ce prtit bout qui n'est pas à lui en réalité?

Je vous dis merci beaucoup par avance pour les réponses.