Droit de garde après 4 ans de séparation de fait

Bonjour mon mari et moi sommes séparés depuis 4 ans car il a trouvé une autre compagne. nous ne sommes jamais passés devant le JAF mais d'un commun accord elle est à ma charge, il me verse une pension alimentaire (déclarée aux impots, caf...) cependant, aucune instance n'a "légalement" autorisé cela. est ce que cela pourrais m'etre dommageable? car je souhaite divorcer pour de bon et déménager à plusieurs km, et prouver que nous avons décidé cette forme de garde à 2 (impots caf... en justifiant).ces attestations et papiers administratifs peuvent ils faire foi? il est evident, et je le comprends que c'est difficile pour le papa. je lui propose de la garder toutes les petites vacances scolaires sauf décembre en alternant une année sur 2 noel et nouvel an. et un mois d'été. et je lui propose meme de lamener chez ses parents certains we. il ne paie pas le train et là ou je veux demenager c'est là ou sont nos familles respectives. apres 4 ans de concessions, je veux repartir. quels sont vos conseil? quelqu'un est il ou a t il été dans ce cas? cordialement