Frais de notaire demandés à la fin des travx

Bonjour, j ai acheté en VEFA une maison mitoyenne. Le vendeur qui fait parti de la famille, devait prendre à sa charge les frais de notaires.
Donc le jour de la signature du contrat de vente je ne paye pas de frais mais le voisin oui.
Après tout un périple, les relations entre le gentil tonton et moi se dégradent. A la fin des travaux, je reçois un courrier du notaire qui me demande une somme dépassant le dernier déblocage.
Je prend contact téléphonique avec le cabinet, on me dit que c est pour rembourser le vendeur des frais de notaires avancés.
Les frais de notaires ne sont ils pas réclamés à la signature ?
Puis je ne pas les lui donner ?
Je vais pas me plaindre ici, mais la construction a été un vrai cauchemard...
Merci de votre aide.