Récupérer mon appartement meublé

Bonjour,
Je suis propriétaire, et loue depuis quelques mois un appartement meublé.
J'ai envoyé hier une LRAR au locataire pour lui signifier qu'il doit quitter l'appartement dans 3 mois.

Je vous explique dans le détail mon problème.
Je loue l'appartement à un PDG qui loge son DG.

Je vis avec ma compagne depuis quelques mois, ce qui a induit la location de l'appartement.
Il se trouve que tout va mal, j'ai donc besoin de reprendre mon unique lieu d'habitation.

Ce soir j'ai été menacé par le DG (celui qui vit dans l'appartement) qui me dit que j'ai intérêt à habiter l'appartement à la date de récupération du lieu sinon j'aurais à faire avec ses hommes de loi.

J'ai peur parce qu'en imaginant que mes problèmes s'arrangent avec ma compagne (un miracle je pense...) et que je n'ai finalement plus besoin d'y vivre il peut m'attaquer?
Je ne parle meme pas le relouer l'appart... pour le moment mieux vaut etre prudent.

Pouvez vous m'éclairer car sans etre malhonnete il me donne mauvaise conscience ce mec !

Merci de tout coeur et si vous n'avez pas tout saisi je vous donne des éclaircissements sans problèmes.