Modification travaux permis construire

Bonjour,
Avons fait une demande de permis de construire dans une zone classée pour un abri de jardin qui a été accordée.
Seulement entre temps nous avons changé d'avis et voulu faire de cette piece une chambre sans modifier le permis de construire.
Au moment de déclarer la fin des travaux auprès des impots on a réalisé que nous n'étions pas dans les normes des impots locaux. Que faire ? nous rendre aux impots pour leur expliquer la transformation de l'usage de cette pièce ? ou continuer à le déclarer en abri de jardin? Quels sont les risques