Conduire pendant son poste

Bonjour,
Actuellement salarié depuis 3 ans en tant que commercial sédentaire dans une quincaillerie, mon employeur me demande de me rendre chez un client situé à 1 heure de route avec un véhicule de société plusieurs fois par semaine. Le problème étant qu’après une opération d’une tendinite j’ai énormément de mal à conduire (mon employeur ne veut rien savoir) puis-je refuser cette demande étant donné que cela ne fais pas parti de ma fiche de poste ? Merci d’avance