Garder une caution en absence de préavis!

Bonjour,
J’ai quitté mon appartement fin juin, mais je n’ai pas pu donner de préavis car j’attendais des réponses pour des écoles. Le propriétaire était toutefois au courant de mon départ au moins un mois a l’avance.
Mon propriétaire m’a dit que ce n'était pas grave, mais qu’il ne me rendrait pas directement la caution, que j’attendrais septembre / octobre.

SAUF QUE
Je l’ai eu aujourd’hui au téléphone et m’a dit qu’il avait décidé de garder la caution par rapport au soucis du préavis.

Sauf qu’une caution concerne l'état du logement (qui était en très bon état à ma sortie) et non le préavis. Le logement étant en bon état il devrait me rendre la caution sachant que nous nous étions mis d’accord pour le préavis.

A-t-il le droit de faire ça?

Cordialement