据报导，马斯克正计划在德州Austin创建一个秘密的“家族庄园”，邀请他的11个孩子和三个母亲的其中两位入住，尽管目前为止只有一个人同意搬进来。
马斯克在Austin的一片绿地购买了两栋相邻的豪宅，总价值$3,500万，彼此步行即可到达。其中包括一栋占地14,400平方英尺的豪宅，类似Tuscan风格的别墅，还有一套六居室房产。与此同时，马斯克还购买了第三套房子，距离前两套仅几步之遥。
为了保密，马斯克在出价之前要求卖家签署保密协议，并愿意支付高出市场价70%的价格。他曾公开表示过，为了应对人口下降，这个社会需要更多的孩子。曾经有报导称，他甚至向朋友和熟人提供他的精子，包括谷歌联合创始人Sergey Brin的前妻Nicole Shanahan，但后者拒绝了这一提议。
到目前为止，只有Neuralink的高管、三个孩子的妈妈Shivon Zilis搬进了该庄园。而另外三个孩子的妈妈Grimes还在和马斯克争夺监护权。Justine Musk是马斯克的第一任妻子，也是五个孩子的妈妈，截止当前她和Grimes均未入住庄园。
2023年夏天，马斯克和Grimes住在Austin一套6900平方英尺的房子里，那个时候他们通过代孕的方式迎来了第三个孩子。当时马斯克计划购买隔壁的房产，以便打造一个私密庄园，供更多的孩子居住。但没多久Grimes就搬走了，就是因为对马斯克和Shivon Zilis关系不满。
2021年，马斯克在Grimes不知情的情况下将精子捐赠给了Shivon Zilis，当时恰逢Grimes和马斯克通过代孕的第二个孩子即将出生。Shivon Zilis在2021年底生下了一对双胞胎，就在Grimes的女儿出生的几周前。Grimes在知道这件事后，便感到非常的不开心。更关键的是，马斯克还将Zilis其中一个女儿命名为“Valkyrie”，而这本来是他和Grimes原本为他们的女儿选定的名字。最终Zilis给女儿改了名字，Grimes也给孩子选择了新的名字。
在孩子出生时，Grimes和Zilis均住在Austin，与马斯克共同抚养子女。直到2023年夏天，Grimes搬离Austin并对马斯克提起了监护权诉讼。
