Bail verbal, remboursement loyer

Bonjour,

J'ai un bail verbal avec proprio pour un logement vide depuis 2001, attestations de loyer ...
En fin 2007 mon proprio est decédé et son fils qui en a herité m'augmente toutes les année mon loyer, donc je paie, et il me fait des attestation de loyer avec le nouveau montant.
Je viens d'apprendre qu'il n'en avait pas le droit car bail verbal pas d'indexation, puis-je lui réclamer tout ce que je lui ai payé en sus de mon loyer initial?
merci pour vos réponses
cordialement