Découverte d'un dégat après état des lieux de sortie RAS.

Bonjour,
Je louais un appartement à une personne. A l'état des lieux d'entrée il fut marqué : RAS. L'appartement étant de l'avis de bon nombre de personnes, insalubre, j'ai vécu dans des conditions vraiment médiocres mais passons. Le propriétaire est venu faire l'état des lieux de sortie avec moi. Il n'a pas trouvé à redire et pour cause je l'ai rendu bien mieux que ce que j'avais trouvé (sale et imprégné d'odeur de cigarette).
Trois jours plus tard, je reçois un appel de ce même propriétaire qui me dis qu'une tache d'humidité a été découverte sur un mur et que c'est surement ma faute. Il veut que je vienne moi même rependre le mur ! Légalement, m'ayant redonné ma caution, peut il me forcer à réparer cela alors que je n'y suis pour rien ?

Merci de votre considération.