Mon propriétaire souhaite nous enlever une partie du jardin

Bonjour,

Nous sommes locataires avec mon mari, d'une maison depuis bientôt 3 ans (en Mars 2016).

Nous avons une cour avec graviers avec à côté un 1er petit jardin d'environ 60m2 avec un poulailler et un abri à bois que nous utilisons pleinement l'été. Ce petit jardin et cette cour sont clôturés.

De plus, nous avons également un très grand jardin avec une belle pelouse, qui lui n'est pas clôturé et donne directement accès à celui du propriétaire un peu plus loin. A part tondre la pelouse, nous n'y allons pas à cause du vis-à-vis. Notre bébé à aujourd'hui 10 mois et quand il sera plus grand, cela nous rassurais qu'il puisse avoir la cour clôturée car le jardin ne l'est pas.

Hier, notre propriétaire nous a annoncé qu'il allait rénover toute la grange qui est derrière le poulailler (pour faire une 2eme location) et qu'il allait nous supprimer tout notre jardin qui est accolé à la cour avec le poulailler, l'abri à bois et le coin de pelouse et faire un mur.

Nous entretenons de bonnes relations avec notre propriétaire, mais nous nous demandons cependant si il est en droit de faire cela ? Ne doit-il pas avoir notre accord ? Est-ce qu'on est en droit de demander une compensation comme une baisse du loyer mensuel ?

En vous remerciant par avance de vos réponses.