Ai-je le droit de revenir sur la signature d'un avenant?

Bonjour, ce lundi dernier j'ai signé un avenant car je refuse depuis un an maintenant un poste de responsable. j'ai déjà eu deux avenant. j'ai refusé pour la troisième fois le poste de responsable. comme mon employeur ne veut pas embaucher un autre responsable (salaire trop élevé), il m'a proposé de reconduire mon avenant que j'ai signé. mon avenant stipule que je suis manutentionnaire avec des responsabilité supplémentaire, mais pas tout à fait celle de responsable. mais à aujourd'hui, ce qui fait une semaine, je voudrais revenir sur ma position car du à cette signature je me retrouve toute seule à faire le travail de deux personnes et je suis fatiguée. et selon la lois mon entreprise ne peux embauché un autre manutentionnaire (c'est ce qui m'a été dit) avant 3 mois. je ne tiendrai pas trois mois toute seule.