Peut-on refuser un congé longue maladie ?

Bonjour. J'ai été opéré d'un cancer, je fais du diabète et j'ai eu plusieurs autres opérations. Je suis en ALD pour le diabète et aussi pour le cancer. A ce jour je ne suis pas en arrêt, mais je suis énormément fatigué, c'est à peine si je peux faire mes journées entières. J'ai alerté la médecine du travail et j'ai eu rapidement un rendez-vous. Le médecin du travail fait un courrier à mon médecin traitant pour me mettre en congé longue maladie, jusqu'à ma retraite (1 an et demi), ma question est (SVP) puis-je refuser cette solution et si je vais contre l'avis médical de la médecine du personnel, je risque quoi? Je travail dans la fonction publique hospitalière et je vais avoir 60 ans dans 3 mois. Merci de votre réponse