Light Field Resources
Light Field Research
- :斯坦福大学光场数据库 :大学计算机图形实验室(Computer Graphics Laboratory)提供的,该数据库所在网站还提供了光场的采集设备(相机阵列),相机标定以及可视化工具可以实现新视点成像以及重聚焦。Light Fields and Computational Imaging ,该文章介绍了计算成像原理。
- 斯坦福大学计算机图形实验室的Marc Levoy教授做的动画仿真,利于理解。Flash applets on some technical aspects of photography,这里面详细地介绍了相机的各种参数变化对应的光路图的变化。
- HCI 4D Light Field Dataset :这是4D Light Field Dataset 的旧版本,提供各种光场源数据。
- 4D Light Field Dataset ,这是HCI数据集的演进版本,综合CVIA Konstanz & HCI Heidelberg,提供各种光场数据,并且将目前的深度估计方法进行评价和排名,使用不同的评价标准,提供各种工具,包括光场数据的解码,将图像阵列转为5D光场(而且可以产生点云),当然只针对他们提供的光场源可以直接转化,其他去的光场源应该改代码内部就能实现,没有具体操作。论文A Taxonomy and Evaluation of Dense Light Field Depth Estimation Algorithms ,介绍了各种深度估计的方法以及性能比较
- Ravi Ramamoorthi教授主页,一位计算成像,计算机视觉领域的大神,他所在组发表了很多高质量的文章,都是计算机视觉相关研究,大部分都是光场相关的文章,如最近的光场视频相关的文章,提供相关文章、数据以及源码。
- 光场实验室网站,研究光场领域,隶属于Ravi Ramamoorthi教授。包括近几年所有光场相关论文和会议,很多是关于深度估计的,这里将是研究光场领域深度图像获取,三维重建以及去除高光等领域研究者的福音。
- 光场相机的缔造者以及Lytro公司的创始人Ren Ng。Lytro官网上可以获得光场相机的体验,实现重聚焦,+++++并且提供了光场相机两代的数据集,提供windows/的LYTRO应用。
- Lytro论坛 :这里有关于Lytro公司以及光场相机最新的应用。
- MATLAB光场工具包,这个工具包从事光场研究的科研人员的福利,后文中我将详细的介绍这个工具包的使用方法。
- LytroMeltdown :包括LYTRO各个版本的相机拆分资料,包括相机结构、文件格式、数据库、协议等等,提供LYTRO deskTop的windows/MAC 应用和LYTRO 内部lfp格式文件的查看工具、以及LYTRO相机相关文章(目前仅有Lytro一代的拆解并没有ILLUM的拆解,原因是过于昂贵)
- cocolib光场工具套件 :这个套件实际上是一个处理凸优化问题的库,既可以用命令行操作也可Matlab界面操作。该库实现了目前集中常用的算法诸如: inverse problems,基于总变分最小化的图像分割以及矢量多标记交易成本函数;当然最重要的还有对于光场图像的分析函数套件(基于HCI发表的深度估计论文)。
- 著名的Middlebury数据集:主要用于双目深度估计,并对针对不同标准对各种算法排名。提供了Benchmark(左右视角的纹理图以及对应的GT深度图像),各种算法的性能对比, 在双目深度估计领域属于最为权威的评估标准。
- Deep learning: Depth Estimation,目前基于双目,多目以及利用光场进行深度估计的算法已有很多;使用卷积神经网络对单幅图像进行深度图像的提取,提供了源码。
- Computer Vision Laboratory - CVLAB :计算机视觉实验室,涉及立体视觉深度估计、三维重建等等,提供相关的源码、工具和硬件。
- 清华大学宽带网数字媒体技术实验室的Yebin Liu 刘烨斌主页,论文居多是视频相关文章,光场相关的文章主要包括,光场图像处理(包括基本概念理论、采集、超分辨率重构、深度估计、压缩、编码、显示和应用)、Light Field Reconstruction Using Deep Convolutional Network on EPI(提供源码)、Light Field Depth Estimation via Epipolar Plane Image Analysis and Locally Linear Embedding、Light Field Editing Based on Reparameterization、Light Field From Micro-baseline Image Pair等等
- 深度图+原始彩色图像转化成多视角动态显示,这算是深度图像的一个小小的应用,输入一张图像和深度图,能够合成新视点图像并且动态显示。
- Synthetic Light Field Archive :麻省理工的提供的合成光场数据,提供光场数据源以及显示光场。
- Wikipedia :介绍光场的基本概念、光场的表示、创建、理论、分析、应用等。
- plenoptic.info :可视化光场相机成像以及重聚焦过程,动态地从光线穿过透镜和传感器平来解释这一过程。
- Todor Georgievs Website :详细讲了光场相机成像特点以及数据
Light Field Datasets
1.The (New) Stanford Light Field Archive :相机阵列光场源,以及相机标定等等其中 相机阵列光场数据 lytro illum 光场相机数据
2.MIT Synthetic Light Field Archive :麻省理工的提供的合成光场数据,提供光场数据源以及显示光场。
- 4D Light Field Dataset :各种深度估计方法的评价等;
- HCI 4D Light Field Dataset :h5形式的光场源;
- Lytrofirstgenerationdataset :提供LYTRO相机的原始数据,以lfp格式以及焦栈图像可用于深度估计,解码方法使用的是matlab光场工具箱。
- EPFL Light-Field Image :提高光场相机数据,包括LFR格式的光场数据以及深度图和相机标定数据。
- LCAV-31 - A Dataset for Light Field Object Recognition :以子孔径图像阵列的形式展示光场源,用于物体识别(A 4D Light-Field Dataset for Material Recognition)。
- Data for: Occlusion-aware depth estimation using light-field cameras
- DDFF 12-Scene 4.5D Lightfield-Depth Benchmark :深度估计使用聚焦的方法。
场景来源
- www.chocofur.com :该网站提供了一些场景,绝大部分是合成场景,很多是需要付费的。
- https://sketchfab.com/britishmuseum :场景大多是雕塑类的,大英博物馆的真实场景图片
- http://graphics.stanford.edu/data/3Dscanrep/ :斯坦福光场源,这都是一些简单场景,如(兔子之类)。
Tools
- Matlab Light Field Toolbox :光场工具箱,光场相机原始数据解码、标定、生成子孔径图像等等,可以使用光场相机以可以使用相机阵列。
- cocolib light field suite :提供光场图像的分析函数套件
- Geometric light field camera calibration toolbox :光场相机的标定。
- Blender addon to create synthetic light field data sets 建立光场源的工具,输入场景图,设置参数,就可以渲染得到光场图像阵列/子孔径图像阵列
讨论区
- Google Community for the Matlab Light Field Toolbox
- Light Field Forum
- Mailing List / General Light Field Vision Google Group