échange de terrains de valeurs différentes

Bonjour,
Notre voisin souhaite acquérir un morceau de notre terrain (constructible) attenant à sa maison contre un morceau de son terrain (non constructible).
Comment doit-on procéder sachant que nous aurions un peu plus de surface, que sur le terrain qu'il veut il y a des bâtiments sur lesquels nous payons des impôts fonciers, que notre maison perd un peu de valeur.
Comment procéder pour que personne ne soit lésé.
Merci
A bientôt