Refuser offre de prêt après acceptation

Bonjour,

Je suis actuellement à un jour de délai des 10 jours pour signer mon offre de prêt, il s'agit de l'achat d'une RP considérée comme neuf suites à de grosses rénovations et surélévation.

Je devais obtenir une attestation de conformité du bien selon les vendeurs avant la date de signature de l'acte authentique.
En contactant la mairie de la ville ou se trouve le bien, j'ai appris au dernier moment que l'obtention de cette attestation nécessite un délai plus long et un contrôle renforcé car la maison se trouve en zone "Monument Historique", nous avons pu planifié une visite du service urbanisme entre l'acceptation de l'offre et la signature de l'acte authentique au plus tôt.

Le Notaire m'a bien rassuré sur le fait qu'en cas de non conformité du bien, je pourrai me dégager de la vente et que même si "j'accepte l'offre je pourrai annuler cet emprunt immobilier sans pénalités".

Je me pose donc la question si je peux accepter mon offre de prêt et la transmettre sans risques ou pénalités. Mon conseiller bancaire étant en congés pouvez-vous m'éclaircir à ce sujet svp ?

Merci de votre aide.

Cordialement,