Problème devis/facture

Le charpentier qui a rénové ma toiture avait fait un devis pour le changement de couverture , de la sous couverture, le type de tuile que j'avais choisi avec lui .... pour une certaine et que j'ai signé sans souci. Il avait vérifié aussi la charpente qu'il trouvait saine et ne l'avais pas compté dans le devis initiale. Le soir de la première journée de travaux , en rentrant chez moi , la couverture et l'ensemble de la charpente avait été démonté, sans me prévenir, il ne restait que 4 poutres . Il avait jugé que les autres étaient mauvaises et donc a tout fait démonté par ses ouvriers en une journée. Je lui demande donc comment on va faire puisque ce n'était pas prévu dans le devis initial. Il me dit de ne pas m'inquiéter ou de ne pas me faire de souci " on s'arrangera et on en reparlera". Les travaux se finissent et je lui règle aux centimes près la somme du devis. Plus de nouvelles pdt qq temps et je me retrouve 3 sem plus tard avec une facture posée dans ma boite aux lettres, sans appel auparavant pour discuter , et la somme dépasse de 2500 euros le devis initial. Il a compté pour le remplacement de la charpente 500 euros de bois et 2000 euros de main d'oeuvre alors que cela ne lui a pas rajouté de temps sur l'ensemble des travaux. Je ne lui ai pas payé cette supplémentaire que je trouve injuste et injustifiée hormis le matériel. Et en plus je juge qu'il n'a pas été correct dans les formes et sur la manière de respecter sa parole. Comment régler le conflit qui se profile ?
Merci d'avance pour vos conseils.