Louer sans agence

Bonjour,

mon grand père possède un immeuble et l'ensemble des logements son gérés par une agence. cependant un seul logement ne l'est pas puisqu'il est actuellement en travaux .
la gestion des locations n'étant pas convenables, il aimerait le louer de par ses propres moyens une fois les travaux finis, a - t-il le droit ?
nous avons entendu dire qu'a partir du moment ou l'agence n'avait pas de clés de l'appartement il était en droit de faire ce qu'il veut... est ce vrai ?

Merci