Rénovation grange agricole

Bonjour,
nous avons hérité d'un bâtiment dont la destination officielle est "bâtiment agricole" il n'a plus d'usage depuis 31ans.
son dernier usage était de loger des vendangeurs sans qu'aucun changement de destination n'ait été fait.
Nous avons commencé les travaux de rénovation, toiture qui s’effondrait, consolidation des ouvertures qui menaçaient également

La mairie nous demande une autorisation préalable de travaux en nous demandant de justifier d'un statut d'agriculteur, que nous n'avons pas.
nous souhaitons évidemment nous mettre en conformité, mais avant d'aller voir le maire, je voulais avoir des arguments pour qu'il accepte le changement de destination et qu'il nous donne l'autorisation préalable.
La question est de savoir si on peut changer facilement la destination du bâtiment, car vu le PLU et la zone agricole dans laquelle on est, cela me paraît difficile.
merci pour vos réponses