Horaires pour récupérer mes enfants

L'ordonnance de non-conciliation prévoit que mon ex mari et moi-même nous nous retrouvions dans une ville à mi-parcours entre nos domiciles pour que nos enfants "changent" de voiture. Le dimanche soir, quand je viens les rechercher, il estime que si l'ordonnance a dit "le soir", il pouvait me les rendre à 20 h sans problème, voire plus tard. Or, après j'ai près de trois heures de route avant de les coucher. Je précise que le plus âgé a huit ans. Est-il dans son droit ? Puis-je demander au juge, lors du jugement de divorce, de fixer un horaire ? Est-ce que c'est déjà arrivé à certain(e)s d'entre vous ?