Assignation en résiliation du bail

Bonjour, nous sommes 2 colocataires et l'agence immobiliaire qui gère notre appartement nous a informé qu'elle était assignée par le syndic de copropriété de résilier notre bail au motif que nous n'usons pas de la chose louer en bon père de famille.
2 voisins (propriétaires) se plaignent du bruit mais seulement 1 est en contact immédiat avec notre appartement (voisin du dessous). Nos voisins de paliers n'entendent rien. Nous avons reçu un RAR du syndic il y a plus de 6 mois. Depuis nous avons était particulièrement vigilant quant au bruit. Mais les voisins en question n'ont cessé de se plaindre du bruit jusqu'à nous menacer.
Aujourd'hui nous sommes inquiet quant aux frais de procédure que nous risquons de payer et nous ne nous sentons pas tranquille chez nous.
Etant donné que nous ne faisons pas de tapage, que les plaintes concernent des bruits de la vie courante, et que nos voisins vivent dans un ancien local commercial et qu'ils sont seul à se plaindre de nous à quoi devons nous nous attendre et comment peut-on gérer cette situation ?

Merci beaucoup :-)