Caution non rembousée

Bonjour,
J'avais fais une promesse de vente pour un terrain à construire, j'ai versée une caution de 5000E qui a été encaissée par l'agence, or je n'ai pas obtenu mon pret, mais j'ai bien les lettres de refus des banques qui sont dans les délais des conditions suspensives. Mais problème!!! on ne veut pas me remboursée sous pretexte que mes demande de pret n'ont pas été déposé dans les 10 jours suivant la signature de la promesse, je voudrais savoir s'ils sont dans leurs droits ou puis-je les obligés à me remboursé ? Merci d'avance pour vos réponses, car je me heurte à un mur face à eux, et j'ai besoin de mes 5000E !!!