老公经常提议住公婆楼上该如何处理？

有个问题困扰了好一阵，想来求助一下姐妹们。 介绍下背景：我和老公在本地离市中心较远的地方买房住，目前无娃，老公非独生。老公父母住在较近市中心的区域，同时同一栋楼楼上有一套房在出租（楼龄较旧）。老公经常提议有娃之后我们应该搬去距离市中心较近的地方有利于娃上学，更为具体的提议就是我们搬去公婆楼上，然后我们本身的房子出租出去，出租的租金给到他父母（两套房市场上房租差不多），他觉得这样父母既可以帮忙看一下娃（划重点：未来我们一定会请阿姨。绝不会出现单纯依靠公婆带娃的情况），并且父母年纪大住得近比较方便。 但站在我的角度，我个人很不习惯和长辈住一起（虽然不是一层，但我觉得肯定免不了经常往来），感觉这样回家都无法完全放松。而且不理解如果要搬去市区，目前我们的房子出租出去，然后单独找一个市区的房子租也不是不可以，为什么非要大家住一起。目前几次我都是没有回复老公的提议，或者反问那你愿意和我妈住一起吗？得到的答复都是没有住在一起上下层（我觉得也不算正面回复我的反问）。想咨询一下大家我这样的想法算正常吗，值不值得坚决维护自己的想法？以及是现在就坚决提出自己意见还是未来真的有娃再说？谢谢集美们了！