Bail signé mais propriétaire souhaite se rétracter

Bonjour,
Nous sommes 2 frères aux revenus modestes qui avons signé chacun un bail individuel de location pour un même appartement. Non, ce n'est pas illégal et il n'y aura pas fraude si l'un ou l'autre bénéficie d'une aide au logement (l'adil nous l'a confirmé). Notre seul soucis est de vivre dans un local enfin décent et de le garder longtemps. L'EDL est prévu dans 1 mois.
Aujourd'hui, le propriétaire souhaite se rétracter mais ne nous dit pas pourquoi. Nous pensons qu'il a peur des impayés, pourtant nous n'en avons jamais eu et avons présenté nos quittances datées de juillet.
Quels sont nos droits? commencer une location dans cette ambiance, c'est dommage! mais c'est tellement difficile, que nous hésitons à y renoncer, surtout si nous ne trouvons rien d'autre avant la fin de nos préavis...
Merci de nous conseiller, si vous le pouvez !