Mon conjoint qui investit dans un bien qui ne lui appartient pas.

Bonjour,
Je suis propriétaire d'une maison familiale que j'ai acquise après décès de mes parents. Pour y habiter, Mon conjoint (ni marié et ni pacsé) à fait avec moi un crédit immobilier afin d'améliorer le bien auprès d'une banque via notaire (ce dernier lui faisant bien comprendre que ça ne faisait pas de lui propriétaire) . Il n'a mis lors de la signature au notaire aucun argent. En cas de séparation peut il me réclamer des remboursements via certaines factures à son nom ?. À part se désolidariser de notre crédit en commun peut il me réclamer autre chose ou c'est perdu pour lui car il n'a aucune part sur cette maison ni sur le terrain d'ailleurs.
A ce jour je pense que je lui devrait aussi la part investi sur le bien via le crédit. (proportionnelle aux nombres d'années)
Quelqu'un peut il me répondre sur ce point ? Merci