“透过你的眼睛看世界”

这技术港真有点吓人，使用照片里瞳孔里面的影像恢复3D场景

Seeing the World through Your Eyes

论文地址：http://t.cn/A6p9rPBg
项目地址：http://t.cn/A6p9rPBd

摘要：
人眼的反射性质是我们了解周围世界的一个被低估的信息来源。通过拍摄移动的人的眼睛，我们可以通过眼睛的反射收集到摄像机直线视线之外的场景的多个视角。在这篇文章中，我们使用包含眼睛反射的肖像图片重建摄像机视线之外的3D场景。

这项任务具有挑战性，因为1)准确估计眼睛姿态的难度，以及2)眼睛虹膜和场景反射的复杂外观。我们的方法共同优化了角膜姿态、描绘场景的辐射场，以及观察者的眼睛虹膜纹理。我们进一步提出了一个简单的虹膜纹理模式的正则化先验，以提高重建质量。

通过对具有不同眼睛颜色的人进行的各种合成和真实世界的捕捉实验，我们证明了我们的方法恢复3D场景使用眼睛反射的可行性。 http://t.cn/A6p9rPdn