Litige apres état des lieux de sortie

Bonjour,
J'ai quitté mon ancien logement le 30 juin 2011.
Le propriétaire et moi même avons fait le tour de l appartement. Ayant refait les peintures et changer le revêtement de sol, il ne trouve rien a dire. Il m'informe alors qu'il m enverra ma caution le lendemain et ne me fait signé aucun état des lieux de sortie car il n'a pas le temps car son nouveau locataire arrive tout de suite.

Le 5 juillet, je reçois un sms de sa part m indiquant que son nouveau locataire a vu des défaut, entre autre 2 portes qui ne fermaient pas et que le bac a douche était fissuré et que lui ne l'avait pas constaté lors de l'état des lieux.
De ce fait, je l appelle et l informe que ces problèmes était présents lors de mon arrivée, mais non signalé sur l'état des lieux d'entrée.

Le 2 aout, je reçois une lettre recommandé du propriétaire ou il joint un devis m informant que je lui devais 2000 euros pour la réparation du bac a douche.
je lui envoie donc également une lettre recommandé lui informant qu'en l absence d état des lieux de sortie contradictoires signés je ne lui réglerai pas la facture et qu'il me doit toujours mon dépôt de garanti de 840 euros à me rendre avant le 30 aout.

Sur ce, mon propriétaire me renvoie a nouveau une lettre recommandé m'informant que si l'état des lieux contradictoires n'a pas été fait, c'est parce que ma femme et moi n'étions pas venu avec l'état des lieux d'entrée, (ce qui est faux mais il ne nous l'a pas demandé donc nous ne l'avons pas sorti) et que si il s'était dépêche de le faire c'est parce que nous étions venu avec notre nouveau né, et qu'il avait constaté les défaut lors de l'état des lieux d'entrée du nouveau locataire.Il ajoute également que nous lui avions certifié qu'en cas de problème nous lui payerons les travaux si il constatait des défauts (je pense que je m en souviendrai si je lui avait dit!!). Il termine en ajoutant que si je persistais dans mon refus, j'aurais directement à faire à son avocat.

Que dois-je faire? accepter de lui régler sa facture ou persister dans ma démarche quitte a aller au tribunal?

cordialement