Simon的白日梦
24-07-16 08:56 微博认证:科技博主

建筑生狂喜,通过平面图直接生成房间布局三维模型~!😮

HouseCrafter: Lifting Floorplans to 3D Scenes with 2D Diffusion Models
🧐HouseCrafter 方法首先生成场景的多视角2D观测,然后再将其重建为3D场景。通过训练扩散模型,利用RGBD图像进行新视角合成,以实现场景一致的多视角RGBD图像生成。
➡️链接:http://t.cn/A6Qub5OU
✨重点
● 🏠 方法核心:基于2D扩散模型,生成场景一致的多视角RGBD图像。模型架构借鉴了最先进的物体中心新视角合成模型,但针对场景级内容的几何和语义复杂性进行了重新设计。
● 🖼️ RGBD图像:使用RGBD图像而非仅RGB图像,提供了强有力的3D场景重建线索,确保图像生成的全局一致性。
● 📐 布局注意层:在每个UNet模块的开头插入布局注意层,以确保生成的图像与平面图一致,确保房屋级场景的全局一致性。
● 🌐 几何利用:改进的交叉注意层利用参考深度的几何信息,生成更高质量的图像。

⬆️⬆️以上分享内容精选自我每周更新的AIGC百宝箱—知识星球:AI白日梦想家([抱一抱]可以向我提问/信息分类查找/72小时无理由退款),加入方法请见置顶帖图9:http://t.cn/A6jz8QLy(WX扫才能享受6折优惠哦) ,感谢大家打赏支持 [爱你]

发布于 广西