Date remise des clefs differente de la date du bail, loyer dû ??

Bonjour,

nous avons signé le bail de notre appartement qui demarre au 1er novembre. Ce jour étant férié, la remise des lefs s'est faite le 31 octobre au soir.
Aujourd'hui le proprietaire réclame le loyer du 31 octobre, alors je voulais savoir si c'etait la date de remise des clefs qui fait foi ou la date de bail. Sachant que le jour du demarrage du bail est un jour férié.
De plus, la remise des clefs par les anciens locataires s'est faires égalementl le 31 octobre, ça voudrait donc dire que le propriétaire encaisserait deux fois le loyer sur ce jour, en a t'il le droit ?

Je vous remercie de votre réponse avisée