Compromis avec un vendeur qui n'est pas propr

Bonjour,

J' ai signé un compromis de vente avec une personne qui est lui même en compromis avec le véritable vendeur,
cet personne est en fait marchand de biens.
le vrai vendeur ne l'a pas engagé.
cet personne à dit au vrai propriétaire qu'il achetait le terrain pour lui, une parcelle de 800m², pour faire sa résidence principale.En fait il a partager le terrain en 2 parcelles de 400m² chacune et il a signé 2 compromis pour ces parcelles, donc moi.Tout ça sans être propriétaire, c' est hallucinant!!!
Quand nous l' avons rencontré il m' a dit qu'il était propriétaire des terrains donc nous avons signer un compromis devant notaire en juillet 2009,depuis ce monsieur n' est toujours pas propriétaire à ce jour(janvier2010) et entre temps j' ai découvert des vices cachés (sol argileux, se qui entraine des surcouts de construction).
En bref je ne veux plus faire affaire avec cet personne trop malhonnête.
Que puis faire sans aller devant les tribunaux et sans y laisser des plumes car j' ai versé chez le notaire 4900€ et au constructeur 2500€.
Je suis désespéré que quelqu'un me dise quoi faire et me vienne en aide.
merci par avance