Détruire un chalet pour le reconstruire

Bonjour, Nous souhaiterions acheter un chalet en bois, en zone agricole. Le chalet existant fait 30 m2, notre projet serait de le reconstruire a l'identique, mais de 40m2, avec une hauteur de toit légèrement plus élevée. Le chalet actuel est cadastré, avec l'eau et l'électricité. Quels sont nos droits? Quelles sont les démarches? Si nous detruisons le chalet, sera t'il permis de reconstruire ou faut il impérativement le laisser sur pied? La commune semble dire qu'il n'est pas permis de le détruire.. nous sommes inquiets car l'habitation est cadastrée pour 30 m2 mais ne fait que 20m2 dans la réalité.