一键将房子的平面图纸转成3D室内场景?室内规划师新玩具!
咱们推出了 HouseCrafter,这是一种新颖的办法,可以将平面图提升为完好的大型 3D 室内场景(例如房子)。
咱们的首要见地是调整在网络规划图画上练习的 2D 分散模型,以在场景的不同方位生成共同的多视图色彩 (RGB) 和深度 (D) 图画。具体来说,RGB-D 图画以分批办法自回归地沿着根据布局图的采样方位生成,其间从前生成的图画用作分散模型的条件以在邻近方位生成图画。分散模型中的大局布局图和留意力规划保证了生成的图画的共同性,从中可以重建 3D 场景。
经过对 3D-Front 数据集进行广泛的评价,咱们证明了 HouseCraft 可以生成高质量的房子规划 3D 场景。咱们将发布咱们的代码和模型权重。
咱们的办法首要生成场景的多视图二维观测,然后以三维方式重建。咱们练习一个可以正常的运用 RGBD 图画履行新视图组成的分散模型。具体来说,该模型从邻近方位获取多张 RGBD 图画,并将编码的平面图作为条件,然后输出一批互相共同且符合条件的 RGBD 图画。
咱们办法的中心是一个 2D 分散模型,它可以生成场景的共同多视图 RGBD 图画。咱们的模型架构创意来自 SOTA 以目标为中心的新式视图组成模型的规划,但针对场景级内容的几许和语义复杂性进行了从头规划。首要,咱们将参阅条件和图画生成都更改为 RGB-D 设置,而不是仅 RGB,由于 RGB-D 图画为 3D 场景重建供给了强有力的头绪。其次,咱们在每个 unet 块的最初刺进一个布局留意层,以鼓舞生成的图画忠诚于平面图,保证在生成房子规划场景时具有大局共同性。此外,穿插留意层(在从前的著作中为参阅新颖视图留意而引进)已更新为使用参阅深度的几许形状,然后生成更高质量的图画。
用户可以终究靠移动平面图上的家具来轻松修改场景的布局。生成的场景也会相应改动。
特别声明:以上内容(如有图片或视频亦包含在内)为自媒体渠道“网易号”用户上传并发布,本渠道仅供给信息存储服务。
我国股市“决心重估牛”提出者、中信建投首席陈果:A股节后不是高点!新散户不会无法解套,要有决心和耐性
2024奖金榜:萨巴伦卡6155万领跑!郑钦文2200万,我国金花排第1
妈妈说看绿色植物对眼睛好,爸爸托着宝宝“小蜜蜂式”看树叶,别急,奶奶正在赶来的路上
三星“G61SD”27 英寸显示器开售:2K 240Hz OLED,3999 元
优派推出“VX2576-HD-Pro-5”27 英寸显示器:1080P 550Hz
苹果估计下一年推出价格更亲民Vision头显 选用M1或A18Pro芯片