Loyer payé par heures travaillées ds propriét

Bonjour,
j'avais un loyer de 300€ et un salaire de 10heures par mois pour entretien de la propriété (250 hectares!). Evidemment je faisais bien + de 10h par mois (minimum 50heures);le propriétaire le savait et tacitement (rien d'écrit), je ne payais plus de loyer et il ne me payait que les 10 heures. 2 ans plus tard il me réclame les loyers impayés (+7000€) et ne veut pas entendre parler du travail que j'effectuais.......; nous nous voyions assez souvent et jamais ne nous sommes réclamés quoique ce soit ni surplus de travail, ni loyer. Je sais qu'il a des difficultés financières, mais a-t-il le droit de me réclamer 2 ans de loyer du jour au lendemain alors qu'il ne l'a jamais fait durant ces 2 années?
Merci de me répondre rapidement