Demande de révision du loyer à la baisse

Bonjour,
Je suis locataire dans une résidence où mes voisins qui louaient des appartements identiques au mien sont partis. Ces appartements ont donc été vides pendant plusieurs mois. Deux nouveaux locataires viennent d'arriver et en discutant avec eux j'apprends que leur loyer est de 550 euros alors que je paie 680 euros. Le propriétaire est très dur en affaire et à part tenter une négociation, puis-je m'appuyer sur un texte légal ?
Si il ne veut rien entendre, puis-je rompre mon contrat en respectant le préavis et me repositionner comme locataire immédiatement après ??