Refuser un avenant de contrat de travail

Bonjour,

Mon employeur avait décider de me payer mon permis de conduire sans que je lui demande.
Aujourd'hui en arrivant au travail, il m'a dit qu'il rajouterais une clause sur mon contrat concernant le permis de conduire. Cette clause stipule que si je m'en vais de l'entreprise il faudra que je lui rembourse au prorata temporis.
Pouvez vous me dire si je peux refuser de signer ?
Et quels sont les conséquence ?

Urgent.
Merci.