Hilft wirklich nur noch Gerichtliche Einigung?

Wir haben eine Umgangsvereinbarung über die Erziehungsberatung.
Der Großen (14) hab ichs irgendwann selbst überlassen was sie mit ihm ausmacht, da sie nicht mehr hin will.
Der kleinen hab ich klar gemacht das wir uns erst mal dran halten.
Allerdings hat er sich jetzt die Freiheit genommen die kleine in meiner Ferienwoche nach Italien mitzunehmen ohne Zustimmung.
Also hab ich mich mit dem Jugendamt telefoniert.
Er fühlt sich im Recht und sagt das auch die kleine selbst entscheiden kann.
Jugendamt und ich sind der Meinung das es für die kleine 11 aber noch besser ist sich an feste Strukturen zu halten. Die Große soll es, wenn sie sich nicht mehr dreinreden lassen will dann auch selber mit ihm regeln, soll sich aber dann auch daran halten.
Also mein Problem ist das er aber der kleinen dauernd einredet das sie das auch darf.
Die Dame vom Jugendamt meint ich solle dem keine große Beachtung schenken.
Was aber schwierig ist wenn ich jede Woche einen Anruf bekomme bzw. Whats app ob sie länger bleiben darf.
Hätte er sie jede zweite Woche müsste man den Umgang halt ausweiten, Oke.
Aber er hat die kleine ja schon drei Tage pro Woche.
Da ich aber alles mache was mit Kindern zu tun hat, Ergo, Reiten, Freundinnen fahren...
gibts da nicht mehr viel andere Zeit.
Ich hab echt keine Lust mehr.
Vor Gericht möchte ich aber nicht.
Wie kann man ihm das nur klar machen?
Auch das er der kleinen nicht immer so viel einredet.