Loyer impayé pour travaux non réalisé

Bonjour à tous.

Voila je suis dans une situation litigeuse.

J'ai remis voila 3 mois et demi mon préavis à mon propriétaire.
Cela fais 2 semaines que j'ai quitté le logement.
J'ai également relancé plusieurs fois pour convenir d'une date pour état des lieux.
Ce dernier s'est rendu ce samedi dans le logement sans moi et sans état des lieux de fait pour sorti.

nous avons eu un arrangement amiable et oral sur la caution qui serait prise comme dernier loyer (loyer de mai), nous avions également convenue qu'il recevrait son loyer d'avril après réalisation de certains travaux qui n'ont jamais était fais.

A savoir : installation de ventilation sur les fenêtres, changement ou réparation d'un robinet fuyant, réparation ou changement du bâti de porte d'entrée + changement du cylindre de serrure dysfonctionnant et réparation des murs qui prenne l'eau et ou des champignons se forme et la réparation de la VMC qui n'a jamais fonctionné (travaux que je demandais depuis +6 mois), après énormément de relance nous avons reçu nos quittance de loyer 7/8 mois après le versement du 1 er loyer. Et nous attendons toujours les dernières.

ce dernier ne me contact pas et ne m'a pas contacter directement pour trouver un arrangement amiable mais contact la personne qui s'est porté caution solidaire en menaçant de mise en demeure + procédure d'huissier.

J'ai dans un premier temps tenté de le contacter par mail mais ce dernier ne me répond pas.

Je lui ai demandé qu'on en reste là au vue des manquements à ces obligations,

en effet, ce dernier ne m'a fournis une installation téléphonique 3 mois après notre arrivée, des chauffages au normes 5 mois après notre arrivée.

L'entretien des communs est fais 1 fois tout les 3 mois (de nombreuse photos sont à ma disposition) nous avons également rencontrés des problèmes de porte d'accès à l'immeuble et ne recevions plus de courrier pendant plus de 2 mois.

Voila en gros que puis-je faire aujourd'hui ?
J'ai manqué au versement d'un loyer mais lui m'en réclame 2 et ne veux pas me rendre la caution. Alors que de son côté il a manqué à pratiquement toutes ces obligations.

Je dispose d'un dossier complet photos etc + courrier et mail de relance
j'ai également une protection juridique.

Suis-je dans mon droit de lui refuser le payement de ce loyer impayée, même si il m'en réclame 2 en protestant sur la caution qu'il m'annonce perdu.