Nein, musst du nicht

Es geht um Umgang zwischen Kind und Vater - nicht um Umgang mit der neuen Partnerin.
Also rein rechtlich bist du da nicht verpflichtet, drauf Rücksicht zu nehmen.

Aber wie die anderen schon schrieben: zwingen kannst du ihn auch nicht.

Ich würde mit ihm darüber nochmal in Ruhe reden, was seine Absagen auf Grund der Partnerin für euer Kind bedeuten und das dies eben für´s Kind nicht schön ist.
Er möge doch bitte nochmal darüber nachdenken oder eben klipp & klar sagen, dass er eigentlich kein Interesse an Umgang hat, dann braucht er auch nicht die Termine der Partnerin vorschieben.