Passage de mon propriétaire

Bonjour,
J'ai un problème avec mon propriétaire,
Il détiens un champ avec des animaux juste à côté de notre jardin, il passe donc par notre cour et notre jardin qui se trouve devant la maison pour y accéder. Lors de la signature du bail il nous a averti qu'il passerais 2 fois dans la semaine, hors il passe tous les matins. Rien n'est stipulé dans le bail.
Ai-je le droit de l'interdit de venir et de passer dans ma cour ??

Merci pour vos réponses.