Conserver un double des clefs. Foyer

Bonjour,

Je suis actuellement locataire d'un studio dans un Foyer.
Il s'agit d'un logement obtenu sur dossier et réservé aux personnes travaillant dans mon hôpital.

Le gestionnaire de la résidence m'a remis une clef et se permet de conserver un double des clefs.
Je n'aime pas cette situation car il est fréquent qu'ils rentrent dans mon logement. (affaire déplacés,...)

Il y a un règlement intérieur très stricte, mais nul part n'est indiqué qu'ils ont le droit de conserver les clefs. Néanmoins, il y est indiqué que je dois les laisser accéder aux logement pour valider que j'occupe le logement conformément aux règles (vivre seule, ne pas changer les installations électriques).

Dans cette situation, puis-je demander (par oral puis par recommandé) la restitution du double des clefs ? Puis-je, si ils refusent, changer le barillet de la porte ?
Avez-vous un lien vers un texte de lois que je puisse utiliser ?

Est-ce que les règles générales s'appliquent aux foyers ?

Merci de vos réponses.