Résiliation d'un bail

Bonjour,
J'ai besoin de vos lumières. ma mère(décédée en fevrier) était locataire d'un appartement dans lequel elle a hébergé mon frère qui n'a aucun droit de bail. Il est sans ressources et ne peut louer cet appartement mais il est toujours dans les lieux.
J'ai adressé une lettre début mars pour résilier le bail qui était aux noms de mes parents mais l'on me dit que ma résiliation au bail n'a pas de valeur car nous aurions dû résilier tous les deux mon frère et moi, étant les héritiers
L'agence immobilière m'a écrit que nous etions tous les deux co-responsables des loyers impayés. Le loyer de préavis a été payé mais ce sont les mois avril et mai qui ne le sont pas.
c'est lui qui est toujours dans les murs, ce serait donc à lui d'assumer ces loyers impayés.
Nous devons recevoir une petite somme en héritage et ces loyers impayés vont être réglés par cet héritage donc un partie sera prélevée dans la somme me revenant.
L'agence immobilière a t-elle le droit de m'imputer ces loyers alors que je n'ai jamais habité avec ma mère et qui plus est, j'ai résilier le bail et payé le mois
Merci de vos réponses