Restitution caution si départ avant un an?

Bonjour,

Je voulais savoir si un propriétaire peut bel et bien me garder ma caution si je m'en vais avant un an de location.
Pour information c'est stipulé dans le contrat que j'ai signé ! Mais je me demande si c'est bien légale??

Je loue un appartement depuis 3 mois et là je déménage dans 2 mois car j'achète une maison, j'ai envoyé un préavis deux mois avant comme cela été stipulé dans le contrat.

Merci d'avance