Changement de la loge du concierge

Bonjour,
Mon mari est concierge d'une résidence de catégorie B. Nous vivons dans la loge avec notre fils (qui est vraiment petite et qui n'a pas vraiment été entretenue). Cependant le logement est vraiment petit, c'est pourquoi le syndicat veux nous changer de logement. Cependant l'agence nous à dit que ce n'étais pas possible car dans le règlement de la copropriété la loge est définit là où nous sommes.
Alors quel sont les recours pour changer de logements de fonction (donc de modifier le lieu de la loge) sachant que cette volonté est partie du syndicat de la copropriété.