[业界新闻]研究人员现在可以获取眼睛反射图像来对一个房间进行3D建模 [复制链接]

　　神经辐射场（NeRF）技术在将二维图像和视频转化为三维模型方面开始显示出一些令人难以置信的能力，但是马里兰大学的研究人员正在将其能力提升到另一个层次，只使用眼睛的反射。 5t~p99#?  

图片:QQ截图20230629103528.png

\dw*yZ^  
　　在现在发表在预印本服务器arXiv上的一项研究中，研究人员展示了他们如何能够拍摄一个人在房间里移动的多张高清图像，然后放大看他们的角膜反射，翻转它们，去除颜色和虹膜可能增加的细节，处理它们以去除弧形镜面的失真，并使用它们来创建3D图像。 D "9Hv3  
mu}T,+9\  
　　当然，这些3D模型的分辨率不是很高；你可以知道这些物品是什么，但不是很详细，而且该团队必须使用特定的灯光来带出这种效果。 CP!>V:w%9!  
E8s&.:;+  
　　而且很难说谁会需要这种技术，又是为了什么--就像一个硬塞进去的"碟中谍"类型的场景。 yUzpl[*e^o  

图片:QQ截图20230629103519.png

eW^_YG%(  
　　研究人员想出了一个真实世界的场景来尝试这个装备：他们放大了麦莉-赛勒斯和Lady Gaga的视频片段中的眼睛反射，希望利用高质量的特写视觉和有利的照明情况。但不幸的是，分辨率不够高，他们最接近的判断是，麦莉-赛勒斯可能是在看一个照明网格，而Lady Gaga可能是在看一个形状非常像人的躯干的物体。 Z 7s (g]  
ffqz :6  
　　无论哪种方式，这都是对人们能从一个场景中获得多少信息的一次尝试。这让我想起了麻省理工学院在2014年研究的一个疯狂的想法，他们通过拍摄薯片包的高速视频，分析其失真，建立一个音频波形，设法重建一个密封房间里的一些音频。 p?,:  

谢谢分享。