Reprise à 80% suite à un 2ème enfant

Bonjour, J'ai repris mon travail à 80% suite à la naissance de mon 2ème enfant avec une nouvelle direction. Pendant mon absence la personne qui m'a remplacé n'a pas fait le travail correctement et mon Directeur veut m'imposer de travailler avec celle-ci sous pretexte que je n'arriverai pas à faire tt mon travail en 80%. Or celui-ci ne connait pas ma fiche de poste et celle-ci ne justifie pas sa requête. Suis je obligée d'accepter? Si non, quelles procédures (lettres,...) puis je faire? Merci par avance de votre réponse. Mélanie l.