Notaire ne voulant pas faire respecter l'acte

Bonjour,
Je rencontre des problèmes avec mon notaire et ce depuis septembre 2010 pour l'achat d'un terrain viabilisé...
Nous avons rencontré beaucoup d'obstacles avec le vendeur de ce terrain et notre notaire n'a jamais montré le moindre intérêt pour nos propres intérêts en nous défendant auprès du notaire de la partie venderesse.
Nous avons fait toutes les démarches nous mêmes, appels de fonds, huissiers, ensuite je ne sais pas non plus comment fonctionne tous notaires mais en l'occurrence le nôtre ne sait vraiment occupé de rien à part faire semblant de jouer un rôle de médiateur par rapport à la partie venderesse, toujours à nous dire de trouver un terrain d'entente.
Bref.
Nous avons enfin réussi à signer l'acte authentique de vente 6 mois après la date butoire de signature (en passant par des sommations, des PV de difficultés, ect....) et ceci avec la mise en place d'un séquestre pendant que le vendeur effectuait des travaux de viabilisation du dit terrain.
La date butoire stipulée dans l'acte pour le vendeur pour effectuer ces travaux a été dépassée. Le jour J nous avons fait faire constater par huissier que les travaux étaient inachevés, toujours comme stipulé dans l'acte.
Des indemnités de retard ont aussi été précisée dans l'acte si ces travaux n'étaient pas effectués à la date butoire. Idem pour le séquestre qui était censé nous être versé en l'absence du vendeur, toujours stipulé dans l'acte.
Il est aussi précisé dans l'acte qu'a rédigé notre notaire avec toutes ces clauses, que le vendeur devait faire savoir à notre notaire via le sien par RAR avant la date butoire si les travaux n'étaient pas finis et idem si ceux-ci étaient achevés faire constater l'achèvement des travaux par un huissier ou par un acte écrit de notre part, acheteurs. Et rien de tout cela n'a été fait par la partie venderesse et elle a pourtant demandé à ce que notre notaire lui restitue le séquestre et que les travaux ont été effectués.
A ce jour, nous, 7 jours après la date butoire, nous demandons à ce que soit respecté l'acte de vente et que nous soit versé le sequestre ainsi que les pénalités de retards seulement notre notaire ne veut pas et nous demande de liser des nos demandes par écrit et de trouver un terrain d'entente avec la partie vendresse!!!!!!!! Nous ne comprenons plus rien, la clause du séquestre est écrite noire sur blanc signé par les deux parties et on nous demande encore de trouver un terrain d'entente que notre notaire soumettra à la partie venderresse!!! Nous en avons assez de ce notaire frileux qui ne tape pas du point sur la table en demandant simplement que soit respecté l'acte signé.
Que peut on faire pour faire que les choses se passent comme inscrit sur l'acte authentique?
J'espère avoir été assez explicite et ne pas avoir trop longue dans mes explications car le message est long!!!!
Avec mes remerciements.
Bonne réception.