Visite appartement, quels droits?

Bonjour,
Mon ami et moi quittons notre appartement bientôt et notre propriétaire, qui est également notre voisin, nous a appelé un jeudi soir pour nous demander si nous étions d'accord pour commencer les visites le samedi matin de 9h à 12H. Comme nous étions absent ce week-end là mais que nous souhaitions lui faciliter la tâche, nous l'avons autorisé à faire visiter le bien sans notre présence. A notre retour, une surprise nous attendait puisque nous avons découvert notre appartement "redécoré" par les soins de notre propriétaire qui a jugé bon de ramener un couvre-lit, des oreillers et des masques africains dans notre chambre d'amis et qui s'est également permis de prendre notre linge sale (que nous avions bien évidemment rangé dans un panier à ling à l'abri des regards) pour déposer nos vêtements et sous-vêtements dans l'armoire à chaussures. Il s'est ensuite permis de mettre nos oreillers sur le lit, d'enlever notre nappe (pour la mettre dans un sachet pour ordure), de déplacer nos serviettes de bain, des tableaux, de mettre du produit dans nos WC etc. Quand nous l'avons appelé pour lui faire remarquer que ce qu'il avait fait été inadmissible et que nous ne l'autorisions plus à faire visiter l'appartement sans nous, il a tout de suite répondu qu'il était prêt à aller en procès alors que nous n'avions même pas pensé à aller aussi loin. J'ai donc peur que cette personne nous ennuie pour la caution, pour la suite des visites ou qu'il ne s'introduise une fois encore chez nous... Cette situation me rend très mal à l'aise et j'ai le désagréable sentiment que l'on a violé mon intimité... Pouvez-vous me renseigner sur nos droits dans notre cas?
Merci d'avance pour l'aide que vous pourrez nous apporter.
Cordialement,
E