Restitution de réservation d'un appartement

Bonjour, suite à une annonce pour la location d'un 2 pièces j'ai eu 3 réponses le même jour. J'ai fait visiter l'appart au premier demandeur qui souhaitait réserver. Il m'a versé 500€ à valoir sur le dépôt de garantie, en attendant que je prépare le contrat de location, la caution solidaire et l'état des lieux. L'entrée dans l'appartement devait se faire 8 jours plus tard.
48 heures plus tard la personne change d'avis et ne souhaite plus louer l'appartement.
J'ai perdu 1 heure pour préparer les contrats, deux matinées pour faire visiter l'appartement qui est à 45 km de ma résidence et j'aurai dépensé 30€ de frais pour carburant.
Est-ce que j'ai le droit de retenir une somme quelconque pour mes frais sur les 500€ qui m'ont été versés en espèces?
Merci pour votre réponse,
Cordialement