Installation d'un abris de jardin en mitoyen

Bonjour,
Lorsque je m'étais renseignée au service de l'urbanisme de ma commune on m' a dit qu'un local de moins de 20 mètres carres n'était pas soumis a une distance obligatoire par rapport a la mitoyenneté. Le mien fait a peine 4,5m mais il est un peu plus haut que prévu : 2,40 mètres environ sur une pente. Avez vous eu ce cas car je ne veux pas de problèmes de voisinage bien que ce voisin ne nous respecte pas (télé de la cuisine porte ouverte a fond, il nous jette des coquilles d'huitres derrière les sapinettes en j'en passe...