Simon的白日梦
26-08-29 11:06 微博认证:科技博主

这个有点酷🥹,给你的摄像头放入一个可以实时移动的虚拟灯光,可以和你的live场景做实时交互,而且还是运行在网页GPU里边的。

摄像头画面上拖一颗灯,深度估算全程不出 GPU。

TypeGPU 单目打光示例开源,摄像头画面上实时注入一颗深度感知的光

Konrad Reczko 把之前那段演示正式公开。浏览器里跑 448×448 的单目深度,再按深度给画面打一颗可拖动的光:挡在手指后面、换颜色、跟着手在空间里走。推理写在 TypeGPU 上,深度缓冲不用拷回 CPU,推理、打光、绘制走同一条 command encoder。他在 M4 Pro 上大约 8ms。现在可以当 TypeGPU 官方示例直接跑。

🔗 链接:http://t.cn/AXpiMRmh(演示)
🎮 在线示例:http://t.cn/AXpiMRnF
💻 源码:http://t.cn/AXpiMRmv
🤗 权重:http://t.cn/AXpiMRmP
📄 原演示帖:http://t.cn/AXpiMRns

权重是 Fengxue93/DepthART 的转换版,BN 和可重参数化分支被折进去了,输出是相对视差,不是米制深度。他自己说精度不够,小细节要么糊,要么会编出来。界面还能切 relit / camera / depth / normals。
#HOW I AI# #ai生活指南# #效率工具#

发布于 广西