Pret : remboursement des frais de garantie ?

Bonjour,

Dans le cadre d'un achat immobilier, j'ai accepté une première offre de prêt, mais que je ne vais finalement pas utiliser car une autre offre plus avantageuse m'a été faite. Mais sur cette première offre, j'avais déjà été débité des frais de dossier mais aussi des frais de garantie (frais de commission de cautionnement).
Y-a-il une chance que je puisse récupérer ces frais ? et si oui, y-a-t-il une démarche particulière à faire ?

Je précise que dans l'offre de prêt il est indiqué :
"Prime de cautionnement :
L'EMPRUNTEUR autorise le Prêteur à prélever le montant de cette prime, [...], au plus tôt dès que l'offre de prêt est devenue définitive, et au plus tard, lors du premier déblocage de fonds. La prime relative à cette Caution ne donne pas lieu à restitution, même partielle, y compris en cas de remboursement anticipé total ou partiel du prêt à l'initiative ou non de l'EMPRUNTEUR."

Merci à vous,