Freund der Schwiegermutter gefährdet Ehe und gemeinsame Zukunft

Hallo liebe Leute,

ich bin ehrlich gesagt mit meinen Nerven am Ende und wende mich an eine neutrale Community... vielleicht wisst ihr ja Rat oder habt wenigstens eine Meinung dazu

Wir, meine Frau, unsere kleine einjährige Tochter und ich wohnen aktuell in einer Mietwohnung, die langsam zu klein wird. Es gibt ein Elternhaus, in dem meine Schwiegermutter wohnt. Diese hat einen Freund, sehr herrscherisch und einnehmender Charakter. Nach dem Motto: Nur er hat recht und alle anderen sind dumm - ich besonders!
Gleich nach dem ersten Treffen, als ich meine Frau kennengelernt hab, viel das Thema Geld und ich verdiene ihm nicht genug und meine Frau solle mich mal anspornen (40 Stunden Woche, gefestigt im Leben, erfolgreiches Nebengewerbe). Nun ja. Inzwischen sind wir eben verheiratet und wir wollen das Elterhaus meiner Frau so umbauen, dass wir als kleine Familie da auch einziehen können. Das hat dem Freund meiner Schwiegermutter nicht wirklich geschmeckt - ob wir denn nen Geldscheißer hätten... (nebenbei, auch meine Frau war bis zur Elternzeit recht erfolgreich im Beruf und wird diesen auch - teilweise - wieder aufnehmen, sobald es geht). Heute ist es eskaliert. Der Freund meiner Schwiegermutter arbeitet als Subunternehmer im gleichen Betrieb wie ich, erzählt rum, dass ich pleite und faul bin und unverschämt, weil ich meine Schwiegermutter im Zuge der Umbaumassnahmen in den dunklen Keller zwingen würde (Hanghaus, superhelle, komplett neue Einliegerwohnung wärs gewesen.. aber is eh schon vom Tisch... naja). Heute habe ich ihn angesprochen bezüglich der Lügen, die er verbreitet.. daraufhin kam raus, dass ich ja eben faul bin, kein Geld verdiene und man muss sich auch Respekt verdienen, das hab ich nicht. und er hat mich durchschaut, ich wolle mir nur das Elternhaus meiner Frau erschleichen, weil ich selbst ja nicht auf die Reihe bekomme im Leben. Und ich zwinge meine Schwiegermutter in den Keller, damit meine Eltern auch kostenlos noch im Haus wohnen können (war nie Thema, wird auch nicht so sein). Also alles erstunken und erlogen.. so. und jetzt ist das mein Problem. Ich möchte mich nicht für ein Haus verschulden und wo wohnen, in dem so ein Typ eben auch aus- und eingeht, hab keine Lust, dem ständig über den Weg zu laufen. Haus verkaufen kommt aber für meine Frau auch nicht in Frage. Ich weiß weder vor und zurück. Jetzt gerade fürchte ich irgendwie sogar um die Ehe wegen so einem.. naja Idioten der Unruhe rein bringt. Was sagt ihr zu dem Ganzen?