Bei Schwiegereltern ausziehen?

Hallo! Ich bin neu hier und total verzweifelt... Vielleicht kann mir hier jemand helfen? Kurze Beschreibung der Situation : Mein Mann hat vor 8 Jahren die Hälfte vom Haus der Schwiegereltern auf eigene Kosten ausgebaut und seit 7 Jahren wohnen wir hier gemeinsam. Ich bin aus 400km Entfernung zu ihm gezogen und habe mir anfangs keine Gedanken gemacht, dass es evtl. schwierig werden könnte. Wir haben einen Sohn (6Jahre) und es wird sich überall eingemischt. Welche Freunde gut für ihn sind etc. Das übliche halt... Nun ist es so,dass meine Schwägerin mit Mann aber ohne Kinder mit auf dem Grundstück wohnt,aber in einem zweiten Haus. Wir haben eigentlich einen großen Garten,dürfen den aber nur begrenzt nutzen. Eine Schaukel ist gestattet, aber mehr auch nicht. Kein Sandkasten,kein Spielhaus, kein Trampolin etc. Der Rasen könnte kaputt gehen... Ich darf mich im Garten nicht einbringen, keine Blumen pflanzen,keine Möbel aufstellen. Es wird immer nur alles mit der Schwägerin zusammen gemacht... Wir haben nur einen Balkon,der zur Wohnung gehört und noch nicht einmal da sind wir ungestört. Wir zahlen keine Miete, haben aber die Umbaukosten von 80.000 Euro übernommen. Nebenkosten,müssen wir natürlich zahlen. Ich fühle mich nicht mehr wohl hier und möchte am liebsten ausziehen. Mein Mann hängt jedoch an dieser Wohnung, weil er es damals FÜR UNS ausgebaut hat... Aber mich hat das alles hier schon so krank gemacht, dass ich zwei Jahre Panikattacken hatte und eine Psychotherapie machen musste. Mittlerweile geht es mir besser,aber ich habe Angst, dass es wieder von vorne losgeht... Meine Schwiegereltern sind nicht einfach und eigentlich mit jedem im Dorf zerstritten. Wir könnten in ein größeres Haus ziehen, das uns meine Eltern schenken würden. Müssten also auch keine Miete zahlen. Was soll ich tun? Am liebsten wäre es mir auszuzie. In einem anderen eigenen Haus könnte ich mich verwirklichen und wir hätten unsere Ruhe. Die Schwiegereltern wären nur 5 Minuten entfernt und könnte auch ihren Enkel weiter sehen... Ich will ihn den Großeltern ja nicht vorenthalten. Aber ich habe Angst vor der Zukunft, wenn wir hier bleiben. .. Hat jemand Erfahrung? Ps: sorgt dass es so lang ist...