Vice de consentement suite à défaut d'infos de l'agent immo

Bonjour,
En septembre dernier je signe un compromis avec une agence immobilière pour acheter une maison. En novembre en faisant des recherches sur le net je tombe sur un article rédigé en 2019 dans lequel le Maire dit qu'effectivement il y a un projet immobilier ( résidence ou lotissement) sur le terrain contigu à la propriété et que ce projet peut voir le jour dans 3 ans. Je fais part de cet élément au notaire et le jour de la signature de l'acte authentique ce dernier ne souhaitant pas engager sa responsabilité entreprend une médiation auprès du vendeur et de l'agence immo qui acceptent de m'octroyer un nouveau délai de 10 jours de réflexion. Le lendemain le vendeur change d'avis et souhaite poursuivre la vente. Le notaire décide alors de modifier le projet d'acte authentique et d'y ajouter une clause qui dit en substance que j'ai été informé, que ce n'est pas un élément essentiel de ma décision et que je renonce à exercer tout recours contre le vendeur à quelque titre que ce soit. Ces termes ne figurent pas dans le compromis. Une clause pénale étant en jeu puis-je invalider la vente du fait de la modification des termes du contrat initial ou demander à ce que la vente s'exécute dans les termes initiaux? Merci pour votre retour