Logement de fonction et résidence principale

Bonjour,
Actuellement astreint à occuper un logement de fonction par "convention de nécessité absolue de service" (Education Nationale), j'ai fait construire en 2007 en vue de ma retraite en 2010 une maison en vue d'en faire ma résidence principale dès ma retraite.
Le fisc me refuse le bénéfice du crédit d'impôt sur les lourds investissements dans une pompe à chaleur géothermique et une cheminée-insert au titre que ce n'est pas actuellement ma résidence principale. Je suis donc sommé d rembourser le crédit d'impôt obtenu dans un premeir temps, avec intérêts moratoires et majoration de 10%.
Or il me faut bien prévoir un point de chute pour ma proche retraite et 3 ans ne me paraît pas un délai indécent pour préparer ce point de chute.
J'étais entièrement de bonne foi en déclarant ces travaux, et je me considère en plus comme un éco-citoyen en ayant fait ces choix, que je n'aurais certainement pas faits s'il s'était agin d'une maison de vacances ou une résidence secondaire ! Quel recours puis-je avoir ?
Merci
Coline