Modification horaires de travail

Bonjour, je travaille pour entreprise de peinture en bâtiment , il y à 3 semaines à cause du Covid j’ai décidé avec mon collègue d’exercer mon droit de retrait pour garder ma fille étant donné que mon épouse travaillait. Le patron l’a donc accepté par dépit en nous indiquant d’abord nous mettre au chômage partiel puis ensuite en garde d’enfant ( après consultation de son comptable ). Mon épouse est désormais en congé et j’ai donc repris le travail aujourd’hui , mon patron nous a convoqué , nous a limite insulter en disant qu’il n’en avait rien à faire de nous et en rappelant que c’était lui «  LE PATRON » !! Il est indiqué sur mon contrat de travail initial que je travaille l’après midi de 13h30 à 17h30 , sauf que depuis le début de mon contrat il a été convenu «  verbalement » que je travaillerais de 13h à 17h ... aujourd’hui mon patron exige que je revienne à 13h30-17h30 ( sans raison valable : vengeance !! ) Cela ne m’arrange pas du tout mais suis-je obligé d’accepter ? Il menace de me licencier ... Merci d’avance pour vos retours ..