Sie froh das dein Freund so ehrlich zu Dir ist. Schlimmer wäre es, er würde auf deinen Wunsch eingehen und wäre mit der Situation unzufrieden. Diese wäre auf Dauer ganz sicher das Ende euerer Beziehung.
Ich habe in meinem Freundeskreis eine ähnliche Situation. Doppelhaus, links Schwiegereltern, rechts das Pärchen und des ist eine Katastrophe. Dabei war die Tocher schon selbständig und hat selber gekocht sowie Wäsche gewaschen. Obwohl die Schwiegereltern nicht dominant sind, bekommt ihr Freund doch immer wieder zu hören: Diese müsste wohl mal gemacht werden, so kann man das doch nicht machen, was sagen die Nachbarn dazu, dann schreit das Kind und die Schwiegereltern stehen sofort vor der Tür usw. Er fühlt sich dauernd beobachtet und ist nervlich am Ende.
Du fragst Dich, ob er dich nicht liebt, weil er nicht bei Dir einziehen möchte. Stelle Dir doch mal anders herum die Frage. Liebst Du ihn wirklich und würdest für ihn auf dein Haus verzichten?