Qui garde les clés en cas de rupture?

mon ex concubin exige que je lui rendre les clés d'un appartement dont nous sommes propriétaires acheté en indivision.
ce logement je n'y vis plus .
lui continue à y vivre.
nous ne désirons pas le vendre.
ais je le droit de conserver les clés de ce logement?
je continue à payer la moitié de tout edf, téléphone, taxe habitation , les charges, l'assurance et bien sûr le crédit logement.
merci de pouvoir m'aider.