Muss ich alleine 24 Stunden für mein Kind da sein?

Hallo zusammen,
kurz eine Erklärung zu unserer Familie: Ich bin selbstständig, arbeite von zu Hause aus, mein Mann ist momentan arbeitslos. Unsere Kleine ist ein paar Monate alt und wir erziehen sie natürlich beide. Jetzt ist es so, dass ich unter der Woche oft mehrere Stunden arbeite (auch wenn es nicht mehr Vollzeit ist) und sich dann mein Mann mit der Kleinen beschäftigt, weil er ja die Zeit hat. Sobald ich mit der Arbeit fertig bin, übernehme ich und er kann seinen Hobbys nachgehen.
Jetzt, am Wochenende, habe ich einfach manchmal Lust, auch was für mich zu tun. Heute zum Beispiel habe ich mich zwei Stunden gemütlich auf die Couch gesetzt und gelesen. In der Zeit hat mein Mann auf die Kleine aufgepasst. Als dann meine Mutter vorbeigekommen ist und das mitbekommen hat, hat sie mir gesagt, dass sie das gar nicht versteht. Sie hätte mich als Kind nie meinem Vater in die Hand gedrückt, dass sie irgendwie gelesen hätte oder so. Auch für das Putzen hätte sie immer gewartet, bis ich geschlafen habe. (Meine Mutter ist seit ihrer Schwangerschaft mit mir Hausfrau, mein Vater arbeitet.) Sie hätte sich keine Zeit für sich selbst genommen, während ich wach war, sie verstehe nicht, wie ich das kann.
Einerseits war ich gleich ein bisschen sauer, weil ich mir dachte, nur, weil ich ein kleines Baby hab, muss ich ja nicht auf mein eigenes Leben verzichten, andererseits habe ich ein schlechtes Gewissen. Sollte ich noch mehr für sie da sein? Fehlt ihr vielleicht was, wenn sie sieht, ihre Mutter liest ein Buch, anstatt sich mit ihr zu beschäftigen? Muss ich wirklich 24 Stunden nur für meine Kleine da sein (außer es geht um Arbeit) oder darf ich mir auch mal etwas Freizeit gönnen und sie Papa/Oma/Opa geben? Wie seht ihr das?