Nuisances de voisinage causées par un 2 gites ruraux mitoyens

Bonjour,
J'habite depuis 18 mois dans un petit village du Calvados et mon voisin le plus proche exploite 2 gites ruraux pouvant accueillir respectivement 15 et 6 personnes.
Sa propriété comprend également une piscine "découvrable" de 15 m de long ...
Très souvent, les 2 gites sont occupés par des groupes familiaux ou d'amis, français ou étranger, qui viennent y faire la "fête" et qui, par conséquent, font beaucoup de bruit !!!
Extrêmement gêné par les cris (des enfants comme des adultes) et des soirées bruyantes, y compris dans la piscine, souvent jusqu'à minuit, voire plus tard, je m'en suis ouvert auprès de mon voisin qui ne comprend pas mon attitude, ne cesse de me dire que les anciens occupants de ma maison ne se plaignaient jamais de rien, que je lui pourrie la vie et que je suis un "emmerdeur" (sic). Pas plus tard que la semaine dernière et alors que mon voisin, qui d'habitude habite sur le même site, était absent pour la semaine, j'ai été extrêmement dérangé par un groupe d'une 20aine de hollandais qui hurlaient de 6h30 du matin, réveillant même ma mère de 82 ans ... ' à plus de minuit et qui, m'ont répondu, après que je leur demandais de se faire plus discrets, qu'ils avaient payé cher leur vacances et qu'ils ne changeraient rien à leur comportement !!! Ils s'en sont plaints auprès du loueur, mon voisin qui est venu m'engueuler car je n'avais pas à aller demander à ses "clients" de faire moins de bruit ! et qu'il pourrait avoir des mauvais commentaires de la part des "Gites de France" !!!
Je ne souhaite pas me fâcher avec ce voisin mais je ne sais plus quoi faire ?
Merci votre aide,
Bien cordialement,
WP