Prélèvements à la source et démission

Bonjour,
Mon conjoint et moi même sommes depuis juillet sans emploi. Je perçois un chômage, je suis donc prélevée à la source. Cependant mon conjoint ayant démissionné, il ne perçoit rien. Quand est il de sa part d'impôt? En sachant que nous avions opté pour le même taux or si nous avions choisi l'option du taux différencié, j'aurai payé nettement moins. 4,2% au lieu de 7,2%.
Va t'on devoir verser la totalité des impôts manquant à un moment donné ?
Je vous remercie.