Reliquat conges

Bonjour,
suite à un arrêt de travail de plus d un an.
J ai voulu reprendre mon travail à mi temps thérapeutique. Je me suis présenté sur mon lieu de travail.
On m ' a repondu que je pouvais rentre chez moi jusqu'au 12 novembre. Mon RH m'a imposé mon reliquat de congé sans m avisé par écrit.
Ils ont refusé de faire visite médicale et m' ont repondu qu il verrait à mon retour.
Ont ils le droit?
Merci de votre reponse