Permis de construire en autorsiation de defrichement

Bonjour,

Début Septembre j' ai fait une demande de permis de construire à la mairie pour une extension de ma maison de 72 m2.
Ma maison se situe dans une zone Natura 2000 et donc une autorisation de défrichement était nécessaire.
Pour compléter ma demande de permis de construire je devais alors envoyer un accusé de réception du Préfet déclarant que ma demande de défrichement était complet.
Dans cette accusé de réception était décrit que ma demande nécessite une visite de terrain et que la date demande expirera le 18 février 2020. Apres cette date, l' autorisation serai tacitement accordé.
La visite du terrain a eu lieu et malheureusement j' ai reçu par courrier (avec accusé de réception, que je n' ai jamais signé), un refus de l' autorisation le 12 février 2020.
Bien sûr nous étions énormément déçu, mais le 20 février le maire nous a envoyer notre permis de construire daté et signe avec le message que nous pouvons commencer, vu l' accord du bâtiment de France, de la DDT', etc. mais aussi vu l' accord de l' accord tacite du défrichement.
Mes questions:
-Est-ce que c' était à moi de communiquer le refus de ma demande de défrichement a la mairie? Ou est-ce que, le Préfet (charger de l' autorisation de défrichement aurai du le communiquer)
-Est-ce que le permis de construire que j' ai est alors valable pour pouvoir commencer les travaux?
-Que feriez-vous, ne plus rien dire à la mairie à propos du refus de l' autorisation de défrichement ou dois-je expliquer la situation?

Merci beaucoup pour vos réponses !