Expulsion d'un colocataire avec bail

Bonjour,

mon colocataire qui est également mon propriétaire veut que je quitte les lieux au plus vite pour "incompatibilité d'humeur". J'ai un bail qui court jusqu'en octobre 2011, je paye mon loyer tous les 1ers du mois, j'ai une assurance à mon nom, je suis très souvent absente pour des raisons professionnelles, je travaille tard, lorsque je suis présente dans l'appartement je ne reçois personne, je participe au ménage et aux taches communes, je ne le dérange pas. Seulement, je n'entre pas dans sa conception de la colocation qui veut que l'on devienne amis à tout prix et qu'on partage tout. Je lui ai dit que je n'étais ni sa compagne ni sa dame de compagnie, il l'a très mal pris, et m'a demandé de quitter les lieux au plus vite !
Quels sont mes droits et quels sont les siens ?