Refus nouveau cdd

Bonjour, je termine mon CDD fin de semaine prochaine, dans mon contrat actuel il n'y a aucune close concernant un renouvellement de contrat, de plus je ne compte pas rempiler pour un autre CDD dans cette entreprise cependant j'ai un peur de la réaction de mon patron face à mon refus de re-signer, en plus il m'a déjà mis sur les plannings .... Suis je dans mon droit de refuser et partir ailleurs ?
Merci d'avance pour vos réponses