Il me réclame 500€

Bonjour,
J’ai besoin d’information concernant mon cas . Je vous explique
Je travail depuis maintenant 7 mois dans un restaurant qui ne me convient pas . J’ai discuter avec mon patron en lui expliquant que j’avais beaucoup de problème en dehors et que je me sentais pas à ma place au travail . Je lui ai demander si il accepterais de me faire une rupture en lui disant que si c’était une histoire d’argent je lui payer ( en étant persuader que ça coûter 0€ ) il me dit bien sûr que je te la fais la rupture pas de problème .
Bref papier terminée . Il y a 3 jours donc après 1 mois de discutions il me dit c’est bon la rupture a était accepter tu part le 9 octobre ... mais il continu en me disant : tu te souvient eu ma dit que tu voulais payer ta rupture ? Je lui répond j’ai pas dit exactement ça mais dit moi ? Il me dit ça fais 500€ donc je vais t’enlever pratiquement tout tes congés payer !
Je lui répond que c’est pas possible que c n’importe quoi et il me dit c pas à moi de payer ta rupture !
S’il vous plaît dites moi que faire ? J’aimerais lui prouver par À + b qu’il n’a pas le droit