Dépot de garantie après un an de location

Bonjour,

Je suis actuellement locataire d'une maison meublé, lorsque nous avons signé le bail, nous avons convenus d'un arrangement avec le propriétaire, nous lui avons fais un chèque de la valeur de deux mois de loyer sans charge, pour le dépôt de garantie, mais il ne devais pas l'encaisser, (nous avons une trace écrite de cet arrangement dans un des échanges par message que nous avons eut avec lui avant la signature du bail) Il était convenue de refaire un chèque chaque année et qu'il ne serai pas encaisser. Il a tenu parole, mais à présent après 1 an de location, il souhaite cette fois ci encaisser la caution. A t-il le droit ? Nous honorons tous nos loyer et jusqu'à présent nous n'avions pas de problème avec lui. Le dépôt de garantie représente une somme importante, et notre loyer est déjà assez conséquent. Que puis je faire ?