Simon的白日梦 24-06-25 16:23
微博认证:科技博主

CLAY:或许是今年最值得期待的3D生成模型,号称质量最好+布线最好+支持的输入模态最多+支持材质生成。

🧐CLAY是一种大规模可控生成模型,用于创建高质量的3D资产,它结合了多分辨率变分自编码器和简化的潜在扩散变压器,通过多种输入形式生成详细的3D几何结构和物理渲染材质。

➡️链接:http://t.cn/A6Qf2VSB
➡️等开源:http://t.cn/A6Qf2VSr

✨重点
●💡CLAY支持文本、图像及3D感知控制输入,能够从多视图图像、体素、边界框、点云等多种形式生成3D几何结构。
●🎨CLAY使用神经场表示连续完整的表面,并采用纯transformer模块在潜在空间中生成几何形状。
●📊通过逐步训练方案,CLAY在超大规模3D模型数据集上进行训练,模型包含15亿参数。
●🖼️CLAY生成物理基础渲染(PBR)材质,能够创建2K分辨率的纹理,包括漫反射、粗糙度和金属质感。
●🌐即使是第一次使用的用户也能轻松利用CLAY将他们生动的3D想象变为现实,释放无限创造力。
●📈展示了从概念设计到细致生产级别资产的可控3D资产创建实例。
●🔬CLAY采用多视图材质扩散模型,确保生成的3D资产在数字环境中的真实渲染效果。

发布于 奥地利