Annulation d'un devis signé avec acompte versé

Bonjour,

Suite à des travaux prévus dans ma maison, un artisan m'a établi un devis afin de refaire la toiture, ainsi que l'isolation du toit, bien que le prix était un peu élevé pour moi,(un peu plus de 21000€) j'ai accepté en me disant que cela serait une plus value a la revente.

J'ai donc signé ce devis en versant un acompte de 3.000€ le 30/01/18 en renvoyant le tout à l'artisan, comme celui ci me l'avait demandé, bien que les travaux ne soient prévu que pour fin octobre 2018, en raison de nombreux chantiers.
En retour, celui ci m'a envoyé une facture pour preuve de paiement.

Je precise que ni sur cette facture ni sur le devis, ne sont noté la date d'intervention des travaux.

Pour diverses raisons, je ne vais pas pouvoir garder cette maison achetée il y a un peu plus de 6 mois, j'envisage donc de la remettre à la vente au printemps 2019.
J'ai donc réfléchi et changé d'avis, préfèrant privilégier d'autres travaux pour la mettre en valeur pour la vente plutôt que de faire cette toiture pour un montant élevé que je ne récupérerai certainement pas.

J'ai donc expliqué gentiment et poliment à l'artisan ma décision d'annuler cette commande et en lui demandant s'il était possible de récupérer mon acompte de 3000€ mais que j'étais prêt à lui payer les déplacements, le mètres effectué etant donné qu'il avait travaillé et pour lui montrer que j'etais correcte.

Mais, il ne l'a pas entendu de cette oreille, il m'a de suite dit que ce n'était pas possible car il avait déjà commandé le matériel pour ma toiture, tuiles, isolant..
Suprise qu'il ait deja passé commande pour des travaux prévus fin octobre, je lui ai demandé s'il ne pouvait pas placer ce materiel sur un autre chantier mais selon lui, c'est impossible.

Je précise qu'au dos du devis, il y a les conditions générales mais qu'il n'y a pas de paragraphe concernant l'annulation....

Je sens bien de sa part une volonté de ne pas vouloir trouver le moindre accord.

Quelle solution puis je avoir ?
Lui laisser cet acompte ou éventuellement récupérer le dit matériel qu'il dit mettre à ma disposition... mais que vais en faire ?

Cet homme n'a cessé de dire qu'il était sérieux, honnete, connu dans la région, débordé par des très gros chantiers et que mes travaux étaient pour lui de "l'épicerie"(il paraît que c'est le terme dans le jargon du métier pour des petits chantiers) mais quand il s'agit d'annuler, il ne veux rien entendre... pour quelqu'un l'honnête et qui a beaucoup de travail...
Y a t il d'après vous une solution ?

J'ai contacté mon assistance juridique mais qui ne m'a pas apporté grand chose si ce n'est me donner l'article L-111-1 du code de la consommation, précisant qu'il est obligatoire de noter la date d'intervention sur un devis supérieur à 500€.
J'ai également trouvé un autre article, L216-1 précisant qu'a défaut de date d'intervention, le professionnel doit exécuter la prestation au plus tard 30 jours après la conclusion du contrat.

Je rentre dans ces 2 cas mais que me conseillez vous, car j'ai bien l'intention de lui préciser dans un courrier mais je ne suis pas sûre que cela l'intimide et l'incite à me rendre mon acompte...

Si vous avez des conseils ou avez vous même connu ce genre de situation, je compte sur vous afin de m'aider..
Merci d'avance.