VEFA, restitution dépot de garantie

Bonjour,
J'ai signé une réservation et versé 5% au titre du dépot de garantie pour un appartement dans un programme en VEFA.
Trois semaines après le lancement de la vente, je constate que le programme immobilier ne se vend pas (ce qui s'explique très bien par les prix de vente des appartement, excessifs par rapport à la réalité du marché).
Je souhaiterais donc abandonner ce projet d'acquisition.
Afin de ne pas obtenir le financement escompté et ainsi pouvoir récupérer le dépot de garantie, puis-je faire valoir le fait que la proposition de prêt que me fait ma banque ne me convient pas et que nous n'arrivons pas à converger sur une proposition qui me satisfasse ?
D'avance merci.