Congé bail pour occupation partielle

Bonjour,

je voudrais donner congé à mes locataires (en respectant le délai de préavis bien sûr) car nous aimerions occuper l'appartement qu'ils occupent, plusieurs mois dans l'année. Mais nous ne comptons pas en faire notre résidence principale.
Est ce possible ?
d'avance merci de votre réponse