Entente de garde difficile

Bonjour,
voila je suis séparé de la mere de ma fille depuis 4mois nous n étions pas marié ni pacsé (aucune procedure engagé juste amiable essayant de ne pas trop faire souffrir la petite)celle ci a quitté le domicile je vois ma fille régulierement et en ce moment meme elle est a la maison avec moi depuis quinze jours et ne l empechant pas en aucun cas de voir sa mere !mais la probleme car des que je dis a ma fille que c est sa maman qui va venir la chercher a l ecole c es une crise me disant qu elle ne veut pas allez chez sa maman qui d ailleurs celle ci n as aujourd hui pas les moyens de la nourir puisqu elle ne touche pas de salaire etc...qui d ailleurs vie avec un homme que moi meme ne veut pas voir s approché de ma fille !!sa mere me dis que c ets moi qui la monte contre elle hors c faut !!suis je en droit de la gardé aupres de moi???merciet que dois je faire?merci