Loi des trous dans les murs

Bonjour,
je suis actuellement propriétaire de deux maisons mitoyenne. Dans l'une des maisons mes locataires partent, ils ont laissé deux trous dans l'entrée, un dans la chambre, ils ont installé une tringle sans demander la permission et ils ont laissé cette tringle pour éviter de reboucher les trous, ce qui ne m'arrange pas forcément, ils étaient au courant de ces trous et n'ont rien dit à l'état des lieux. J'ai enlevé 50 euros de la caution, mais les locataires ne sont pas content et veulent aller plus loin pour récupérer leurs sous. Devrais- je me méfier?
Cordialement.