ISP - bayer 是什么？

bayer格式介绍

bayer格式图片是伊士曼·柯达公司科学家Bryce Bayer发明的，Bryce Bayer所发明的拜耳阵列被广泛运用数字图像。

Bayer格式是相机内部的原始图片, 一般后缀名为.raw。

历史

sensor技术的发展经历了3个阶段，从单色相机->三块分光棱镜->Bayer pattern

单色相机中只能感知亮度，而不能感知色度，因此只能生成灰度图像；

采用R/G/B三个滤光片来分别生成R/G/B三个通道，但是数据量太大；

Bayer开发出了bayer pattern后，已经成为了现代sensor的通用做法：每个像素只采集R/G/B中的一种光谱(每个pixel上设置了一个像素级的滤光片）

bayer模式，平衡了成本和色彩信息量的关系。

ISP恢复RGB for each pixel

每个像素只采集R/G/B中的一种光谱(每个pixel上设置了一个像素级的滤光片）, 通过后期的ISP处理来为每一个pixel恢复完整的RGB数据。

彩色滤波阵列（Color Filter Arrays，CFA）

ISP - demosaic

Demosaic的目的，就是在bayer数据基础上，恢复出每个pixel完整的RGB数据。

因为bayer pattern看起来像一个个马赛克，因此称为去马赛克

彩色滤波阵列（Color Filter Arrays，CFA）

ISP通用算法

亮度调节(亮度增强)，

对比度调节，

饱和度调节，

gamma校正，

去噪denoise，

dither，

sharpen(锐化),

color correction（颜色校正),

Auto-exposure control(自动曝光控制),自动对焦(Auto-focus).自动白平衡(AWB)，

AWB的原因：

人眼具有颜色的恒常性，也就是在不同的色温http://baike.baidu.com/view/1086.htm的光照条件下，人眼都能准确的判断物体的颜色。

但是sensor不具有这种特性，在不同的色温的照明下，颜色会失真