Perte de clé

Bonjour,
J'ai perdu la clé de mon appartement il y a plus d'un an (je précise uniquement la clé et rien d'autre pouvant renseigner sur l'adresse). J'ai logiquement payé un double, et il n'y a eu aucune effraction depuis. Je viens de changer d'appartement et le propriétaire veut changer la serrure et que le coût soit à ma charge. À savoir que ce sujet n'avait jamais été abordé, que l'état des lieux est fait (il a été marqué "porte RAS, perte d'une clé, puis plus loin clés rendues en bon et dûe forme"). Il veut donc retenir le coût du changement de serrure sur la caution. Est-ce vraiment à ma charge? Merci d'avance pour votre réponse.