Partir pendant arrêt en accident de travail

Bonjour,

Je suis en arrêt accident de travail depuis maintenant un peu plus d un an.
Mon arrêt va continuer car je dois faire une reconversion professionnelle car avec ce que j ai je ne plus exercer mon métier (problème au bras).
Depuis que je suis en arrêt je suis restée à la maison et cet été j aimerai partir à La Réunion pour voir des proches sur place.
Je sais que je dois prévenir la sécurité sociale et j ai l attention de le faire mais je voulais savoir dans quels cas ils peuvent me refuser de partir?

Merci par avance
Cordialement

Lili.v