Refus de permis après les délais légaux

Bonjour,
j'ai déposée un PC le 05/11/2012 ensuite des pièces m'on été demandés le 20/11/2012 et le dossier a été complet le 18/02/2013 2 jours avant la date limite. Fin mars 2013 n'ayant aucune nouvelle de la DDT de soissons j'appelle pour avoir la suite de mon permis de construire et personne ne pouvait me répondre, la personne qui s'occupait de mon dossier était en arrêt et on m'a dit de rappeler 15 jours après, je rappelle vers le 10 avril et elle ne pouvait rien me dire, j'ai insisté car j'avais signé un compromis de vente et je devrais signer la vente en juin 2013. Le 20 mai je reçois un courrier recommandé en me notifiant que je bénéficiais d'un accord tacite depuis le 18/04/2013 mais qu'ils allaient le retirer en le considérant illégal, or je n'ai rien cachée de mon dossier le CAUE a transmis le 20/11/2012 un avis de modification des pentes de la maison et mon abris de jardin fallait le reculer de 10 mètres, c'est les raisons d'illégalité, je ne comprends ils le savaient dés le début et je n'ai pas été informé ils ont laissé passer les délais légaux de 2 mois et maintenant on me dit qu'il est illégal. J'ai répondu à ce courrier en disant que je trouvais que ce retrait était abusif et là j'ai reçue un courrier le 05/07/2013 de la préfecture de l'aisne pour notifier le refus du permis. Est-ce normal, normalement après les délais il y q'un juge ( disposant de 3 mois) qui peut refuser un permis, c'st bien ça ou je me trompe. Comment faire le notaire attend pour la signature de vente et là je suis bloquée.
Merci de votre réponse