Refus du maire d'accorder un permis

Bonjour,
Voilà mon problème :
Ma femme et moi-même avions un projet de construction. Nous nous sommes donc orienté vers un terrain constructible de mon père dans un petit village.

Le terrain en question fait 6800m², nous avons donc procédé à un partage avec mon frère et ma soeur à part égal pour plus d'équité (conseil du notaire). Jusque là pas de problème, donc demande de Certificat d'Urbanisme (CU) pour la division en vue d'une donation en famille.
CU accepté avec les lots et renseignements sur les servitudes : eau potable déservi (réseau passant dans la parcelle), assainissement déservi (jouxtant la parcelle) et électricité à 80 m (poteau à 80 m).
Nous voyons donc le maire pour lui faire part du projet et parlé de toutes ces servitudes : aucun problème, avec même déjà un devis pour l'extension de réseau d'électricité de 3800€ prêt à être accepté et payé en conseil municipal.

Nous déposons donc le permis de construire en bon et due forme.
Et là 2 mois après arrêté de la commune au nom du maire, permis refusé avec dessus : terrain avec eau potable non déservi, assainissement non déservi et électricité à 110 m.
Explication du maire : après conseil de la DDE, il veut faire un autre devis pour emmener l'électricité pour les 3 lots. Et là selon le montant du devis, ça sera soit à ma charge soit la sienne en fonction du prix!

A-t-il le droit? Sachant qu'on a eu un CU stipulant les servitudes et après tout autre chose (de 80 à 110m, etc...)?
Que sont mes recours? Sachant qu'il n'y avait aucun problème avant qu'on pose notre permis de construire?

Merci de m'éclairer sur la question.