Dette de loyers

Bonjour,
En 2007 étant au chômage j'ai ne pas payé 4 mois de loyer.
Je repris mes paiement de loyer après. Depuis je règle mes loyers par virement.
Ma dette été de 3200 euros. Depuis mars 2011 je rembourse cette dette, 50 euros
par mois, car je suis à nouveau au chômage. Mon bailleur privé a reçu déjà 8 remboursements de ma part (400 euros).
Et maintenant il ne veux plus mes 50 euros/mois, car cela lui fait trop de gestion.
Il me menace de tribunal, des intérêts sur ma dette, de changer ses coordonnes bancaires pour m'empêcher de faire mes virements.
Que dois je faire ?