Droits de succession d'une précédente succession

Bonjour, suite au décès de sa maman, mon compagnon et son frère ont reçu en héritage la maison familiale. Ils ont donc réglé les droits de succession demandés. Aujourd'hui, le trésor public leur demande de payer des droits de succession que ma mère aurait dû régler quand elle a elle a précédemment hérité de cette maison de son frère alors qu'à l'époque, le notaire qui s'est occupé de son dossier avait notifié qu'elle n'avait aucun droit à régler (actes en ma possession). La maison possède 4 appartements, une seule entrée. Le trésor public s'appuie sur le fait que 2 taxes d'habitations étaient réglées et donc impossible de prouver que ma mère habitait bien le même appartement que mon oncle même si le dossier médical de celui-ci prouve qu'il était atteint de la maladie d''Alzheimer. Le seul héritage reçu est cette maison, pas d'argent ! Aujourd'hui, on nous demande de "payer 460 000€ que ma mère aurait dû régler" !
Je suis handicapé à 96% et ne perçois qu'une rente accident du travail. La maison est estimée à 600 000€. L'état va-t-il la saisir puisque nous ne pouvons pas payer. Nous avons déposé un recours suite à la saisie de nos comptes bancaires. Celui-ci a été refusé. Que pouvons nous faire ? Merci de vos réponses.