Temps partiel sans avenant. Est-ce légal ?

Bonjour,

J'ai demandé en 2016 à passer au 4/5e soit 28h contre 35h hebdomadaire.

Nous avions échangé oralement avec mon employeur avec une seule réserve, que je revienne à 100% si ce temps partiel n'était pas suffisant pour mener à bien les tâches qui m'étaient données ou si de mon côté je souhaitais revenir à 100% (car mon activité de freelance ne décollait pas).

Aucun avenant au contrat n'a été proposé et donc signé à l'époque.

En 2018, je demande à revenir à 100% car mon activité en freelance ne décolle pas. Mon employeur refuse prétextant que je ne peux pas modifier le contrat de travail de manière unilatérale.

Je travaille donc depuis 2018 à 80% (avec 20% de salaire en moins) et souhaiterais revenir à 100% ou bien quitter l'entreprise.

L'absence d'avenant au contrat de travail est-il un motif suffisant pour reconnaitre une faute grave de l'employeur et prendre acte de la rupture de contrat ou lancer une procédure de résiliation judiciaire ?

Cordialement,