Was soll ich tun?

"Ich war bis jetzt nur einmal mit ihnen einen Tag allein."
Verstehe ich das jetzt richtig, dass du bisher mit deinen Kindern nur einen Tag alleine warst?
War die Situation (du weinst und er reagiert nicht bzw. er ist eiskalt) auch schon vor der Geburt der Kleinen oder weitaus früher so?
War er schon immer so oder gab es irgendwann eine Veränderung zur jetzigen Eiseskälte?

Anhand deiner kurzes Ausführung würde ich sagen, dass die Geburt eurer Kleinen jetzt 4 Wochen her ist und die Hormone in deinem Körper deine Gefühle Achterbahn fahren lassen eventuell auch in Richtung Wochenbettdepression.
Rede mit ihm, wie es Dir geht. Wenn das absolut nicht geht, schreib das ihm auf. Rede mit deiner Habamme oder auch deinem Frauenarzt.

alles gute