Clause pénale et acheteur négligent

Bonjour,
Nous avons signé un compromis pour la vente de notre maison puis un avenant à ce même compromis en baissant le prix car notre acheteur ne pouvait pas emprunter la somme définie au départ (nous avons dû déménager dans une autre région car mon mari avait été débauché et n'avions que cet acheteur : le but était donc de s'accrocher à cet acheteur pour que la maison soit vendue au plus vite car 2 loyers à payer c'est financièrement difficile).
Notre acheteur nous a mené en bateau pendant des mois et n'a jamais fourni ni accord de prêt bancaire, ni refus de prêt.Le notaire lui a donc stipulé, après un dépassement de plus d'un mois de tous les délais, que la vente était caduque et que nous faisions marcher la clause pénale du compromis(il était donc sommé par lettre recommandée d'envoyer au notaire la somme de 21 100 euros: à la signature du compromis il n'avait pas été demandé de chèque de séquèstre).L'acheteur n'a jamais répondu, nous avons donc fait appel à un avocat qui a tenté un courrier de conciliation amiable: celui ci est resté sans réponse.
Nous allons maintenant aller en justice pour récupérer ces 21 100 euros ainsi que des indemnités car ce Monsieur nous a mis dans une situation financière délicate, il a volontairement laissé pourrir la situation car il me l'a avoué par téléphone et il ne veut rien payer(il dit vouloir acheter la maison encore moins cher alors que nous avons déjà baissé de près de 60 000 euros et qu'il veut aussi un délai de plusieurs mois supplémentaires: bref il se croit dans un autre monde ou on ne respecte ni les règles, ni les engagemements pris à la signature du compromis).Ce monsieur ainsi que sa femme saont tous les 2 salariés, alors je souhaiterais savoir comment va se passer la procédure (durée et coût) pour récupérer la clause pénale qui nous est dûe?
merci pour toutes vos info car nous sommes désespéres : maison toujours pas vendue, double loyer et la banque qui ne nous aide en rien!!!!