论文《用于帧内编码多次曝光的双抽头计算摄影图像传感器》学习

《Dual-tap Computational Photography Image Sensor With Per-pixel Pipelined Digital Memory for Intra-frame Coded Multi-exposure》
（2019 SCI 一区）

摘要： 提出了一种用于对焦成像的曝光像素图像传感器。每个框架博览会-确定时间被分成N个子框架。在每个子帧中，每个像素根据该像素的1位二进制代码将生成的电荷分成两个电荷点。在每一帧中实现了N个任意像素级代码的全局更新，从而在一帧内实现了N个短的全局特定于像素的子序列。为了使这些子曝光全局化，以流水线方式使用每像素两个锁存。下一子帧的代码以行并行的方式加载到锁存器1中，而当前子帧的代码由锁存器2全局地应用于当前子曝光期间的光生电荷排序。采用0.11μCMOS图像传感器（CIS）技术，制作了像素间距为11.2μm的280h×176v图像传感器样机。图像传感器已在两个计算摄影应用中得到证明，每个应用仅使用一个视频帧：1）通过结构光成像计算反照率（反射率的测量）和三维深度图；2）通过光度立体成像计算表面法线（三维方向）图。这些演示实验验证了该计算图像传感器的一些独特能力，例如仅使用一台摄像机的精确3-D视觉场景重建，同时保持其本机规范：全空间分辨率和最大帧速率。

索引项 -三维成像，三维场景重建，主动成像，主动像素传感器（APS），反照率自适应成像，电荷桶，CMOS图像传感器（CISs），编码曝光成像，编码曝光像素（CEP），压缩传感，计算相机，计算摄影，计算机视觉，解调对比度，深度图，视差，双拍像素，浮动扩散，全局快门，高帧速率，光生电荷，光度立体成像，固定光电二极管（PPD），像素拍，可编程曝光，可编程光投影，反射率，单帧计算成像，空间光调制器，结构光成像，表面法线，点击对比度。

八、结论

提出了一种在单帧曝光过程中多次在像素级进行相机可编程的方法。这使得许多新的成像应用在计算摄影，包括以前需要笨重和失真光学与现货相机一起使用的应用。所提出的CEP相机已经在两个这样的应用中进行了演示，但只使用了一个图像传感器。这些三维成像技术是：结构光成像和光度立体成像，都是在一个单一的框架内实现的。与使用与CEP相机中的子帧速率相同的帧速率操作的高帧速率相机的等效实现相比，所提出的相机在每个子帧中不遭受附加的读取噪声，提供实时操作而不受过高输出数据速率的限制，不需要过多的输出缓冲存储器。低功率和低复杂度也是重要的优点。