Achat d'une maison

Bonjour,

Avec mon conjoint nous avons acheté une maison, signé un compromis de vente le 18/10/2018 avec date butoir pour signature de l'acte définitif le 31/12/2018.

A ce jour, le vendeur nous dit qu'il ne pourra pas sortir de la maison avant le 15 janvier, car la signature du bail pour son appartement ne commence que le 01/01/19 (le temps de tout déménager).

Le notaire dit qu'il ne peut rien faire, et que nous devons nous arranger entre nous.

Quels sont nos recours ??

Merci pour vos réponses.