Avis a tiers detenteur sur ma retraite

Le mois dernier j'ai recu un avis a tiers detenteur pour mon IR 240euros j'ai appelé le Tresor public pour leur payer directement l'impot car j'avais les fonds, la personne ml'a dit que c'était trop tard , et que celà n'entrainait pas de frais supplémentaires lorsque je lui ai posé la question , je vois au versement de ma pension ce matin que je n'ai pas eu la retenue et j'ai eu un courrier de la CRam me disant que je sera retenu le mois novembre pour moitié +100 euros de frais!ma question est puis je aller payer direct aux impots la totalité afin d'éviter ces frais puisque la retenue ne sere faite qu'en novembre??merci beaucoup