Comment expulser des locataires pour travaux

Bonjour,

Nous sommes propriétaires en indivision d'un petit immeuble. Dans cet immeuble il y a eu un péril récemment qui nous a obligé à reloger les habitants. Aucun problème en général sauf pour un locataire qui a refusé toutes les propositions de logement, ce qui nous a obligé à lui payer un hôtel à 3 fois le prix de son loyer!
Ils ont (car ils vivent à plusieurs, père, fils, cousins ...) réintégré l'appartement ensuite.
Mais voilà, le père a plus de 65 ans apparemment (l'appartement est sous contrat de gestion). Or il y a à cet étage une petite pièce non occupée que nous pouvons pas louer toute seule et nous souhaiterions faire des travaux pour intégrer cette pièce à leur appartement pour ensuite couper l'appartement en deux et faire 2 appartements.
Y'a t-il une solution pour pouvoir récupérer l'appartement?

Merci de votre réponse.