Demande d'information

Bonjour, Lors de la remise de solde de tout compte, suite à une rupture conventionnelle, (reçu dans la rue "dans le cadre des gestes barrières), mon "ex" patron m'a fait part que j'étais le seul responsable des très mauvais chiffres N-1 de la société et que je ne devais plus exercer le métier de responsable technique... puis je porter plainte pour propos diffamatoires ? Vers qui me tourner? Par avance merci pour vos conseils.