Achat d'une maison 2 proprietaires 1 seul emprunteur

Bonjour,
Il y a 5 ans 1/2, mon compagnon et moi-même avons fais l'acquisition d'une maison principale. Sur l'acte notarié, nous sommes tout 2 propriétaire à 50 %, toutefois c'est Monsieur qui a fait seul l'emprunt immobilier avec un apport de 80000 euros et j'ai moi de mon côté apporter ou acheter tout les meubles de la maison. J'ai aussi financer les travaux de peinture, tapisserie, revetements de sol...
A ce jour, nous nous séparons et mon compagnon souhaite mon départ ainsi que celui de mes 3 enfants donc je vais prendre une location. Mais il ne souhaite pas vendre et veut rester dans l'habitation sans contrepartie financière. Quels sont mes droits ? Il veut me poursuivre en justice pour que dorénavant je lui paie la moitié du crédit de la maison alors que je n'y vivrais pas, en a t-il le droit ? Merci de votre réponse rapide car je ne sais pas quoi faire et c'est invivable.
cORDIALEMENT
PS : nous ne sommes ni mariés, ni pacsés et ce n'est pas non plus le père de mes enfants