Non reconduction d'un bail...

Bonjour, voilà, je viens de changer de logement depuis ce mois ci, j'habitais avant dans un appartement au rez de chaussez dans lequel je n'avais pas resigné de bail puisque, j'ai habité durant 2ans dans l'appartement du dessus qui appartenait au même propriétaire et dans lequel j'avais signé un bail en entrant. Mon problème est le suivant; j'ai quitté ce logement après 2 mois de préavis pour contenter mon nouveau propriétaire, l'ancien propriétaire veut évidemment ne pas me rendre la caution en guise du dernier loyer manquant ce qui est de son droit celà dit je me demande si le fait de ne pas avoir signé de bail en changeant de logement me donne le droit de négocier une partie de cette caution étant donné que le bail que j'ai signé ne correspond pas à ce logement. j'espère avoir été à peu près clair, merci d'avance.