Abus de confiance propriétaires/ex locataires

Bonjour,
Nous avons vécu 3 ans dans un appartement en rez de jardin en tant que locataires; hormis notre temps donné et nos efforts fournis pour embellir le jardin, nous y avions monté un chalet en bois de 7M2. Nous avons dû déménager et trouver dans la hâte un autre logement puisque nos propriétaires vendaient l'appartement. Nous avions convenu avec eux que jusqu'à la vente de l'appartement nous laisserions notre chalet dans leur jardin, dans l'espoir que le futur acquéreur soit intéressé pour nous le racheter personnellement. C'était un accord moral, que les trois agences mandatées pour vendre l'appartement connaissaient puisque lors des visites elles étaient censées expliquer aux éventuels intéressés que le chalet était là en plus et qu'il était à vendre indépendamment de l'appartement; et que, dans le cas où le futur acquéreur n'était pas intéressé, il serrait démonté et enlevé du jardin.
L'appartement est vendu depuis presque 3 semaines et ni les agences, ni les propriétaires ne nous ont contacté pour nous avertir de ce qu'il en était du chalet; et lorsque nous avons enfin réussi à les joindre ces derniers nous confirment que le chalet a été vendu avec le lot et qu'il n'y a plus rien à faire ! Nous avions toujours entretenus de bon rapports avec nos propriétaires et c'est pour cela que nous n'avions pas jugé utile de préparer et signer conjointement un écrit à ce sujet. Quel recours avons- nous aujourd,hui pour récupérer notre bien? Pouvons- nous porter plainte pour abus de confiance?