Bailleur peut il donner congé au locataire pour fin caution

Bonjour,
Nous avons des gros soucis avec notre fille , étudiante, pour qui nous nous sommes portés caution pour la location d’un appartement. Nous nous sommes aperçus un peu tard qu’elle a déserté son logement depuis son installation car elle a rencontré un jeune qui l’héberge et à qui elle donne une participation financière. Nous payons la totalité de son loyer et les charges. Elle n’a pas des revenus.
Aujourd’hui nous souhaiterions cesser d’être garants et nous pouvons le faire avant la date d’anniversaire du bail, qui est dans 3 mois. Cependant nous nous sentons redevables avec les propriétaires de ce logement qui sont des gens adorables. Ma question est la suivante : Est-ce que les propriétaires peuvent évoquer un motif légitime et sérieux encadré par la loi , notamment le non renouvellement du cautionnement, pour la contraindre à résilier le bail ?
Car elle souhaite conserver l’appartement comme dépôt de ses affaires et adresse postale. Elle nous refuse aussi de nous remettre le double de clé de l’appartement. Il faut dire qu’elle est sous l’emprise de son petit ami et c’est lui qui détient ces clés.
Merci de votre soutien et de m’apporter une réponse au plus vite