Construction sans permis

Bonjour, voici mon problème qui est dur à bien expliquer.
J'ai acheté en 2010 une maison et aujourd'hui je veux la vendre hors le notaire de l'acquéreur s'est rendu compte d'un gros problème . En effet l'ancien propriétaire qui m'a vendu la maison n'avait que fait auprès de la mairie qu'une demande de permis d'extension pour la maison qui y était avant, hors l'ancien propriétaire au lieu de faire que les travaux pour une extension et ce pour quoi le permis lui a été délivré , il a carrément démoli l'ancienne maison sans autorisation et en a construit une nouvelle sans permis. La maison est cadastré mais là que je veux la vendre le notaire des acheteurs potentiels se sont rétractés car pas de permis donc soucis. Que puis-je faire