Reprendre mon logement avant la fin du bail ?

Je loue actuellement ma maison et il reste encore 2 ans sur le bail.
Actuellement je suis sans domicile fixe car je n'ai pas d'emploi et les bailleurs sociaux depuis 6 mois et assistance sociale ne m'ont pas trouvé de logement.
J'ai loué ma maison car j'ai suivi mon ami qui était muté pour 3 ans, il m'a quittée en juin 2009 et 'j'ai donc pris contact avec mes locataires pour expliquer ma situation afin de reprendre le logement, et la réponse a été négative.
N'est ce pas là un motif légitime et sérieux de ma part pour casser le bail ?
D'autre part, j'ai inséré une clause dans le contrat du bail que les locataires admettent par mail ne pas respecter.
Tous deux ont des revenus plus que confortables (cadre et vétérinaire) et sont également propriétaires bailleurs.
Quand le propriétaire se retrouve dans une situation précaire, n'a t-il pas le droit de reprendre son logement ?
Merci de vos réponses.