Construction sur terrain au nom des grands parents

Bonjour,
Si nous faisons construire un maison sur un terrain qui est encore au nom des grands parents qui sont décédés et qui avaient 4 enfants. le terrain a été partagé en 4 parts égales. j' ai moi même des frères. si je construis sur la parcelle de ma mère à qui appartient la maison. sachant que le terrain est toujours au nom de mes grands parents.