Le hangar agricole déguisé en maison

Bonjour,
mon mari et moi venons de faire l'acquisition d'une petite maison en zone agricole construite en 1972.
avant le compromis de vente nous nous somme rendu a la DDE pour connaitre les possibilités d'agrandissement.
n'étant pas agriculteur nous ne pouvions pas agrandir de beaucoup la surface mais c'etait suffisant pour y installé notre atelier(nous sommes artisants).
nous signons le compromis de vente rapidement,pas le temps de faire le CU.
nous demandons alors au notaire de s'assurer de la régularité de la maison,il nous rassure,le permis est OK,nous signons l'acte de vente pour une maison d'habitation.
après la vente nous demandons tous les papiers de la maison.
nous découvrons que le permis est un permis pour un hangar agricole,mème si les plans correspondent a la réalité c'est a dire les plans de la maison avec son toit 2 pentes ,la petite porte,ses 3 fenetres....
nous nous sommes fait floué sur la vente et nous ne pouvons plus construire notre atelier pour pouvoir travailler.
cette maison est cadastré,possede toute les viabilités(racordement réseau d'eau,electricité,voirie,fosse septique) et les impots fonciers ,taxes foncieres sont payés depuis plus de 20ans.
evidement la DDE nous dit que n'etant pas agriculteur elle ne peut pas régulariser la maison.
quelqu'un aurait il une idée pour nous sortir de la? j'ai encore besoin de croire au miracle!
merci de votre aide.
zoé.