Devis non signé mais acompte versé

Bonjour à tous,
voilà je vous explique ma situation :
dans le cadre de remplacement de fenêtres sur mesure, mon artisan m'a envoyé un devis et m'a demandé un acompte de 50%.
J'ai accepté le devis mais sans le signer et lui ai versé les 50 % d'acompte.
Je précise que depuis que je travaille avec lui, nous avons toujours eu de tres bons contacts et avons toujours procédés de la sorte.
Je lui ai versé l'acompte début décembre 2017 ; fin janvier 2018, il me dit qu'il va bientot recevoir les fenêtres mais qu'il veut les 50% restants afin de finir les travaux.
Vu que les travaux prenez du temps (il m' a dit à plusieurs reprises que les fenêtres sur mesure devaient arrivées mais elles ont mis 2 mois à arriver) je lui ai répondu que je lui ferai le virement des 50% restants une fois les fenêtres installées.
A partir de là, plus de réponses par email et impossible de l'avoir au téléphone. J'ai juste pu avoir des nouvelles par la dame de l'agence qui gère mon bien et la mauvaise surprise ; il ne veut plus faire les travaux et ne veux pas me rembourser mon acompte car je n'ai pas signé le devis.
Que puis je faire ?
Merci d'avance pour votre aide.