Droit de construction

Bonjour, je suis en train d'acquérir un petit terrain. Je suis aller voir la secrétaire de mairie pour demander ce que je pouvait mettre dessus (chalet,mobil home ou petite maison). Elle m'a répondu que vu qu'il n'y avait pas de POS et que mon terrain ce trouve en dehors du bourg,je ne pouvais rien faire.Sachant que l'eau passe au pied du terrain que l'électricité n'est pas très loin et qu'une maison est toute proche.Elle m'a dit que si je faisait une demande de permis de construire ou une demande de travaux celà serait refusé.Est-ce vrai ? N'y a t-il aucun moyen de mettre un petit chalet? Ce terrain je le guette depuis près de vingt ans ça me depasse!