Seconde construction sur terrain zone naturelle

Bonjour,
Ma femme et moi avons acheté 2 terrainsen 2011,8000m2 avec un certificat d.urbanisme informatif permettant la construction sur la totalité du terrain(pas de zone de limitation de construction), et 3000m2 agricole accolés.

Sur le plan de division et de bornage, il apparaît une ligne entre ces 2 parcelles mentionnant( c.est écrit dessus) limite de zone constructible).

J ai approche la mairie pour savoir si je pouvais construire une seconde maison sur mon terrain de 8000m2=> NON, vous pouvez faire une extension,limitée à 30% .

Mon voisin et dans le même cas , nos 4 terrains sont issues de la division d'une plus grande parcelle.

Mon voisin et moi avions compris que notre terrain Était constructible jusqu.a la limite mentionnée sur le plan, et comme nous n.avons pas de limite de surface de "plancher, nous pourrions a l.avenir construitre d.autres maisons.

C.est en grande partie ce qui avait motivé notre achat.


Quels sont nos recours?

La mairie peut elle nous accorder ce droit à construire comme elle l à fait sur notre première construction, le terrain était déjà en zone naturelle?
Puis je me retournée vers l.ancien propriétaire?l.agence immobilière qui nous a vendu le terrain?

Merci pour votre aider...