【南洋理工团队推出首个支持物理仿真的三维生成模型!生成资产可直接部署于机器人训练】
首个支持物理仿真的三维生成模型来了! 仅凭一张普通照片,AI 就能直接生成 3D 数字模型,并预测重量、软硬、关节活动等真实的物理属性。
也就是说,AI 生成的不再只是与照片描述长得相似的资产,而是真的能够与物理世界进行交互,并有望对具身智能、物理 AI、AI for Science 的模型直接进行训练。
近期,新加坡南洋理工大学刘子纬副教授团队开发了统一的三维生成框架 PhysX-Omni,打通了刚体、可变形体、关节体(铰链体)三类资产的物理级 3D 生成。研究人员发明了一种模板化游程编码,不仅直接让语言模型读懂三维结构,还显著提升了生成性能。
“之前 3D 模型生成需要进行实际扫描和采集,但由于价格昂贵且无法规模化,并不适用于大模型的可扩展性。”刘子纬对 DeepTech 表示。而 PhysX-Omni 开启了近乎无穷无尽的生产模式,相当于做数据基建,不断为物理 AI 生产提供训练素材。
戳链接查看详情:http://t.cn/AXSAo9R0
