Umgangswochenenden tauschen

Hallo zusammen,
weiß jemand wie es sich mit folgender Situation verhält:
im Jugendamt wurde festgelegt, dass Umgang von Freitag bis Sonntag an den Wochenenden von geraden Kalenderwochen stattfindet. Jetzt würde ich gerne ein Wochenende tauschen (wollte paar Tage mit meiner Kleinen und Großeltern in Urlaub). Kindsvater sagt nein, ohne Begründung einfach, weil er nicht will.
Kann er wirklich so mit mir umgehen? Es kann doch nicht sein, dass er so Macht ausübt?
Es geht mehr ums Prinzip, nicht um den Urlaub, das ist ja nix lebenswichtiges, wäre halt ganz schön..
Was sagt ihr zu der Situation?