Location appartement sans bail non déclaré

Bonjour a tous,

je vous expose mon souci :
j'ai transformé le garage attenant a ma maison en appartement (sejour, cuisine, sdb, chambre).
Je loue cet appartement en meublé sans bail écrit, non déclaré (je sais c'est mal).
Les loyers sont payés en liquide sauf un mois qui a été payé par chèque de la mère du locataire.
Aujourd'hui je souhaite récupérer cet appartement pour des raisons personnelles.
J'ai donc prévenu le locataire qu'il devra libérer l'appartement dans les deux mois.
Celui-ci ne veux rien savoir, me menace d'aller voir la police, me dit qu'il faut un prévis de 6 mois (!).
Ce locataire et plutot "volcanique" ayant fait des dégats dans l'appartement en seulement 5 mois de location.
Tout ça pour en arriver a la question (ou plutot aux questions) :
Quels sont ses droits et quels sont mes droits ?
Puis-je le forcer à partir ou n'ai je aucun recours?

Merci pour vos réponses
Cordialement