Die Loesung ist insgesamt nicht optimal.

Wie soll das funktionieren? Spaeter einmal werdet ihr beide neue Partner haben, dann geht der Stress erst richtig los.
Such dir mit den Kindern eine Wohnung woanders.
Und beantragen kann er viel, wie dann entschieden wird ist eine andere Sache.
Aus meiner Erfahrung ist es jedoch so, dass er fuer das Sorgerecht gute Karten hat, wenn du vorerst ohne die Kinder ausziehst. Das tust du ja in diesem Fall, wenn auch im gleichen Haus.
Ich wuerde nur mit meinen Kindern gehen und wollte auch nicht mitbekommen, wer bei ihm so zum Uebernachten bleibt.