Remboursement acompte réservation appartement

Bonjour,
Cherchant à louer un appartement, j'ai visité il y a peu un 2 pièces trouvé via une annonce internet d'une agence immobilière. Quelques jours après la visite, j'informe oralement l'agence que l'appartement me plait et que je souhaiterais le louer.
Ayant laissé mon dossier à l'agence au préalable, l'agent immobilier répond favorablement à ma demande et me demande un acompte de 500 euros pour réserver l'appartement(soit 60% du loyer ... j'indique ne vouloir verser que 300 euros d'acompte mais l'agence ne veut rien entendre et il me faut absolument cet appartement sinon je vais bientôt me retrouver la rue). L'acompte est envoyé à l'agence et je demande un reçu que l'agence me fourni dès sa réception.
Le problème est que l'agent a tardé à me préciser les frais d'agence (non présent dans l'annonce, non annoncé durant la visite, peut-être affiché en vitrine mais je ne me suis jamais rendu à l'agence) qui sont de 1800 euros ! Cette information me parvient bien entendu une fois l'acompte versé ...
L'agent me confirme que ces frais ne sont pas partagés avec le propriétaire. Pourtant il me semble que la loi exige de partager ces frais entre le locataire et le propriétaire.
N'ayant pas une telle somme à ma disposition, je souhaite me rétracter et récupérer mon acompte.
N'ayant signé aucun document de près ou de loin, j'estime que l'agence aurait du m'informer du montant des honoraires avant de demander un acompte et qu'ils sont en tort. De plus, il me semble que l'agence n'est censée percevoir ses honoraires que lors de la signature du bail (bail non signé).

Pensez-vous que je puisse récupérer mon acompte et annuler la réservation sans que l'agence ne me pose de problèmes ? Suis-je dans mon droit ? Merci d'avance.