Refus de déblocage des fonds

Bonjour,

la banque nous a accordé un prêt immobilier pour le financement d'un terrain (39 000€) qui pour le moment n'est pas constructible. Le prêt correspond uniquement au prix du terrain. Nous comptons le viabiliser prochainement. Hors la banque refuse de débloquer les fonds et nous ne pouvons donc pas passer devant le notaire... La raison du refus de la banque est que ce terrain n'est pas notre résidence principale (normal, le terrain n'est pas encore constructible...).
Mais le compromis est signé, le prêt est accordé. Nous sommes engagés. Hors la signature ne peut toujours pas avoir lieu. Le vendeur s'impatiente.
Que faire ? La banque ne s'est-elle pas engagée à nous financer ?

Merci de vos réponses rapide,