Clôture mitoyenne et serre attenante

Bonjour,
Mon voisin a installé une serre collée à la clôture et dont deux poteaux ont été fixé sur la clôture mais dans mon terrain.
De plus, après bornage, la clôture ne respecte pas le tracé.
Puis-je enlever les deux poteaux qui sont chez moi au risque peut-être de détériorer sa serre ?
Comment faire pour faire aligner la clôture sur le tracé des bornes posées par le géomètre. Qui fait, qui paye ?
Merci de vos réponses.