Делюсь наболевшем

Вобщем хочет мой муж купить или построить дом. Очень давно и очень страстно. Его рвение очень поддерживает его мама, так как тоже всю жизнь мечтала о доме. Я в принципе тоже не против, но кипятком от идеи не писаю, мне и в квартире бы норм жилось. Сейчас живем в квартире моей мамы (мама живёт отдельно тоже в своей квартире). Мне повезло что моя мама половину жизни горбатилась и обеспечила меня жильём. Так вот. Нашли дом в ближнем пригороде, хозяева согласны на обмен на старую квартиру в которой живут сейчас бабушка мужа и его брат с женой и дочкой. Схема такая-эта квартира меняется на дом, бабушка и брат переезжают в квартиру свекрови, свекровь переезжает в квартиру где живём мы. А мы отстраиваем дом, так как этот дом старый и без удобств. Муж категорически настроен записать дом только на свою мать, так как она меняет квартиру. Я же считаю, что это не справедливо, ибо мы с мужем будем вкладывать силы, деньги и душу совместно и на протяжении многих лет, так как там строить и не перестроить еще. Короче чуть не до скандала с мужем. Он меня слушать не хочет и твердит, что я не права. А я не хочу жить в доме на птичьих правах и потом, если он решит меня выставить- уйти ни с чем и всё, во что вложилась, кому то подарить. Тем более в случае чего этот дом придется делить еще и с братом мужа. Я еще и на работу собираюсь выйти, чтобы не бедствовать выплачивая кредит, который мы возьмём на благоустройство. А так бы могла наслаждаться декретом. Еще и ребенка придется пристраивать то туда то сюда, а учитывая что дом за городом, это не просто вообще, так как обе бабушки окажутся на другом конце города. Короче эта ситуация меня очень напрягает. Не знаю как быть и как переубедить мужа… гнетёт меня это очень сильно… не понимаю как дальше себя вести…