Que faire sur des terrains en zone A et B ?

Bonjour,

J'ai acquis des terrains dans les pyrénées pour y poser un chalet de 9m². Le vendeur m'a assuré que c'était possible.
La mairie du village m'a répondu à mon mail (seulement une fois la vente effective), que c'est interdit. Je n'ai pas le droit d'y camper, ni d'y poser une cabane à outil, toujours d'après la mairie. Donc, ces terrains me sont inutiles.
Qu'en pensez-vous?

Merci de votre réponse.