《数码相机中的图像传感器和信号处理》-part2

光学系统

前言

对于“光学系统”这个词会有很多疑问，啥子是光学系统，这和咱们要说的数码相机有啥联系，它究竟是咋影响或者作用到相机里面的…
有人说咱们80%的信息都来源于视觉，数码相机系统就对应人眼所得的过程，其组成部分也可以简单理解对应如下：

• 成像光学器件 – 眼睛
• 成像单元 – 视网膜
• 图像处理技术 – 大脑

闲聊：透镜如何成像？

A：脑子里面有个凸透镜成像的实验，成倒立缩小的实像，这个就是用在照相机上来着，但是满足的条件搞忘了。
B：那先回忆一下物理中的透镜成像吧，然后再继续聊书中的大致内容，光学系统基础那些。

百科视频：透镜成像规律
A：啥是物距 相距 焦距呐？
B：一张图搞清楚，在来点文字描述。

物距u：物体到透镜（或镜面）中心的距离。
相距v：像到透镜（或镜面）中心的距离。
焦距f：焦点到透镜（或镜面）中心的距离。
焦点：平行于主轴的光线经过凸透镜后，会聚到一个点，这个点称为焦点。（上图中的那个白点）

一、光学系统基础和光学性能评价标准

预备知识+关键术语

1.光学系统基础

一个凸透镜时，两侧都是凸面，焦距和透镜的关系

A：上图这些个字母都啥意思啊？
B：f 焦距，d透镜厚度，n 透镜材料的折射率，R1 物体所在侧的曲率半径，R2 像所在侧的曲率半径，R1R2是区分正负的，举个例子，凸透镜，R1是正数（10），R2是负数（-10）。

A：就没有非常薄的透镜嘛？
B：假设有，那么d =0,就得到了下面的公式。

B：咱们可以总结一下，比如：n-1越大，f越小。顺便思考下图文章中的论述是否正确？

两个透镜时，f1透镜1的焦距，f2透镜2的焦距，d表示两个透镜的距离，关系如下：

A：实际运用中的相机是几个透镜呐？
B：手机摄像头为例子，camera一般有4~7片，有的甚至更多。
A：这么多镜片都是凸透镜嘛？记得凸透镜是聚光，凹透镜是发散来着。
B：一般是凹凸镜搭配，具体这个得看镜头焦段的需求了，常见的广角、主摄、长焦等等，举个例子图2.2广角，图2.3长焦

A：那数码相机上常说的F数是啥子？
B：相机中的F数是表示镜头光圈大小的参数，也称为光圈数。所以F数最小为0.5。

B：张角很小时，公式变形如下，

A：前面说到的高斯公式咋来的呢？
B：高斯成像公式（也叫透镜成像公式，）咱来盘一下这个，假设物体离相机距离很远，物体大小为y，就可以画单个透镜图

m ：放大倍数
a：物距
b：相距
f：焦距
带入就可以推导出高斯公式

！！！有效F数的计算公式不是很理解，有几个点
1）分子f+q来源 f+q=b,这不是相距嘛，
2）F2.8和F5.6成像亮度问题,试图拆解
结论：某个条件下，这俩镜头亮度一样
条件： F2.8成实物等大的像时—》u=2f，v=2f，m=1
带入公式F’=2F??–>所以5.6=2*2.8???
可我的理解是2.8的亮度应该要大于5.6,因为光圈越大，亮度越高，人麻了。。。
当然亮度关系的也不是很理解，咱先记住，后面懂了再来补充，直接上原文

2.调制传递函数和分辨率

这个有接触过，客观测试解析力，使用的12233 chart。
MTF：调制传递函数，常用作评价镜头成像性能的标准。
A：为啥MTF就能成为个标准？
B：MTF是空间频率的传输函数,是用来表征物体图案传递到像像的忠实度的一种方法。图2.5中的曲线举例说明了MTF空间频率的特征,其中纵轴是以百分数表示的MTF,横轴是空间频率(线对/毫米),横轴的单位代表像平面上每毫米拍摄到的亮线和暗线(线对）数。

横坐标越大，物体细节越多，再现能力越弱，MTF越小。
分辨率：它是对细节捕捉能力的一种评价指标,而且线对/受毫米也被广泛地用作分辨率的单位。高分辨率是指很好的还原细节图案。
下面是三种模式的MTF空间频率特征，以及分别对应的彩图。

3.相差和点阵图

理想状态成像，满足三个条件：

• 点所成像仍为点。
• 平面所成像仍为平面。
• 物体和它的成像形状一样。

实际状态成像，不能满足，因镜头存在相差； 赛德尔对镜头相差进行了数学上的分类。
原文：
百科：

----是有点误会在的----

根据赛德尔的分类，单色光受到5种基本的三阶像差的影响，该5种三阶相差统称为赛德尔像差（还有9种五阶像差，统称为施瓦兹蔡尔德像差）：
1）球面相差，是由镜头的球形表面引起的，这意味着光轴上的点光源形成的像不能聚焦到一个点上，可以通过减小光圈尺寸来校正。
2）彗星相差，对于光轴外的点光源，会产生彗星形状的带有尾巴的光斑，这通常可以减小光圈尺寸来改善。
3）像散，点光源被投影成线或者椭圆所导致的像差。受到焦点的影响，线的形状像是旋转了90°（例如，垂直线成水平线），减小光圈尺寸可以降低这种像差的影响。
4）场曲，当物体是一个平面时，这种相差会导致焦平面弯曲成碗状，从而导致像的边缘模糊不清，减小光圈尺寸同样可以这种相差的影响，因为它增加了焦深。
5）畸变，使图像产生扭曲的像差。这种相差不会影响MTF，并且不同通过减小光圈来校正。

下列相差统称为色差：
1）轴向的或者是纵向的色差指的是透镜对不同颜色（不同的波长）的光有不同的焦点。减小光圈尺寸可以补偿这种色差的影响。
2）倍率色差或者横向色差是指透镜对不同颜色的光的放大倍数不同，于是，从像的中心向边缘去看可以点对称的色彩扩散，减少光圈尺寸并不能校准这种色差。
点阵图可以在像差图的基础上，进一步让读者对镜头的性质有个完整的了解。点阵图就是许多点来表示点光源的像。点阵图中用来描述光与影的函数称为点扩散函数。当用傅里叶将其转化到实数域时，得到之前讨论的调制传递函数。

二、数码相机中光学系统特点

1.光学系统配置

数码相机成像光学系统一般包括成像镜头、红外截止滤光片和光学低通滤波器(OLPF)。
除此之外还有成像元件，成像元件（如CCD）不包含在成像光学系统中。

2.景深和焦深

景深，物体在像清晰时所在的范围（深度），与焦距的平方成比例。
焦深，成像元件一侧的深度。
（短视频上有很多视频讲解这部分。）

3.光学低通滤波器

光学低通滤波器（Optical Low Pass Filter，简称OLPF）是一种重要的光学元件，其主要功能是允许低频信号透过，同时滤除高频信号，以实现对图像的滤波处理，从而达到清晰信号和降噪的目的。这种滤波器广泛应用于数码相机、可视电话、电脑摄像头、照相手机以及监控用摄像机等设备中。
以下是光学低通滤波器的主要作用：
减少摩尔纹：高频纹理（如布料、格子图案等）在拍摄时可能会产生摩尔纹，这是一种条纹状的干扰现象。光学低通滤波器通过将高频信号进行模糊处理，减少这些干扰情况的发生。
降低伪影：在高分辨率拍摄中，某些极细小的高频细节可能会引起伪影。OLPF能够减弱这些高频细节，从而降低伪影的产生。
增强图像质量：通过减少干扰和伪影，光学低通滤波器可以在拍摄复杂纹理时提升图像的整体质量，使得图像更加平滑和自然。
保护传感器：在某些情况下，光学低通滤波器还能起到保护图像传感器的作用，避免在极端光照条件下出现的高频信号影响传感器的正常工作。
总的来说，光学低通滤波器是为了在成像过程中平衡分辨率和图像质量，避免高频纹理导致的图像畸变和干扰。值得注意的是，近年来一些高端相机也提供无低通滤波器（AA滤镜）的版本，提供更加锐利的图像，适用于对于摩尔纹不敏感的拍摄环境。

4.衍射的影响

衍射现象是由于光作为波在传播过程中特性改变所引起。当光波遇到障碍物或通过狭缝时，会发生绕射并在障碍物或狭缝边缘发生散射，导致光波改变其传播路径。
像素间距不断减少,明晰圈尺寸也逐渐减小,紧凑型数码相机受到衍射影响更加显著。光具有波动性，所以像不能汇聚成一点。这里有个著名的艾里斑和瑞利极限。

这部分对我来说有点犯困，不能很好理解，可以自己查一下圆形光圈的理想镜头的F数与氦的d线单色光的MTF空间特征的关系曲线，Sparrow分辨率。

三、光学系统设计的重要几个方面

1.设计过程

这部分上原文就行，简述每一步都是干了啥。

2.玻璃材料的选择

玻璃类型多，非球面透镜技术的提高，那数码相机如何选择镜头？
下图为可用于光学设计中的玻璃类型的分布图，其中横轴阿贝尔数代表色散能力，阿贝数表明由于光波长不同导致的折射系数不同的程度,可以简单地认为它是用来描述光谱(由白光通过一个三棱镜后分裂而成)中7种颜色振幅之之间的关系,阿贝数越小,光谱中7种颜色的振幅越大。
在图2.14中,绿色区域表示已有的光学玻璃类型,而黄色区域表示使用最频繁的玻璃类型。
由于种类很多， 所以选择就需要考虑很多因素，光学性能、耐用性、环保性、运输和成本。也有的采用有特殊色散倾向或者折射系数超高的玻璃。前者对降低色差的影响很有效果,而后者在制作能提供更高性能的更紧凑的镜头时很有用。
萤石是著名的有特殊色散倾向的玻璃材料。它是一种晶体,不同于玻璃之类的非晶体。它不仅有很高的阿贝数(很低的色散度),而且有非同寻常的色散性质,还以异于玻璃的方式将光分离成7种颜色的光谱,这使得它在校正色差(尤其对于里望远型镜头和高倍率变焦镜头)时效果显著。另一方面,它硬度低,所以在用手拿的时候要格外小心。它的表面也很脆弱,所以在加工萤石时要由专业人员来操作。

3.有效利用非球面透镜

非球面透镜可以用来校正的球面色差,而且在校正其他与色彩无关的像差时也有效。根据非球面元件应用的场合不同,它对种像差的削弱作用也有所变化。
提高紧凑型数码相机的便利性和便携性的关键在于减小尺寸,这就要求将高紧凑度和高性能结合起来,从而发挥成像元件像素间距小的优势。如果是只对性能有要求,最简单的方法就是增加透镜的数目,但这与减小尺寸背道而驰。另一方面,仅仅减少透镜的数目意味着为了维持同样的性能只能减小每组透镜的焦度(焦距的倒数),这通常会导致透镜变得更大。简而言之,除了使用非球面透镜之外,我们别无选择。
非球面透镜根据制作和材料，一般分为以下4种类型：
(1 ）“精密抛光成型玻璃非球面透镜”的生产成本很高，因为它必须逐个地研磨和抛尽管它不适合大批生产，但提高了设计的灵活度，而且当透镜直径很大时仍可以采用。
(2 ）“精密玻璃模压成型 CG Mo ）非球面透镜”通过将低熔点的玻璃置入模具中并加压而成。这些透镜有很高的精度和耐用性 。直径小的 GMo 透镜很适合大批量生产，但将直径做大很难，这将带来生产效率的问题。
(3 ）“混合成型非球面透镜”通过在球面透镜上覆盖 层树脂膜使其变为非球面而成。当使用这种透镜时必须考虑温度和湿度等因素的影响 这些透镜在直径很大时相对更好用一些。
(4 ）“塑料成型非球面透镜”通过在模具中置入塑料（一般采用注塑法）制成。它们很适合大批量生产 并且是生产成本最低的非球面透镜类型 然而，由于它们很容易受到温度和温度变化的影响，制造时还需要采取一些特别的措施。
重上到下，成本逐渐降低，批量生成的能力提高，透镜的限制也在提高。第二种需求量增加，性能好又适合大批量生产。但符合要求的玻璃种类很少，所以适用的材料提供范围也窄。

4.镀膜

不需要的光在镜头各个透镜表面多次反射引起的重影问题。成像镜头和元件反射率较高时，为了减小影响，为透镜镀膜是很重要的。
镀膜方式有很多，广泛的是真空积淀–成膜材料在真空中加热变成气体,然后在透镜表面淀积成一层薄膜。其他方法有溅射和浸渍(2将透镜浸泡在液体中)。
下面分别讲述，不镀膜、镀一层膜、镀两层膜时，折射率的差异：

如下图表现不同镀膜时，折射率和反射率的关系、反射比和波长的关系。

5.抑制边角镜头出射光线的角度波动

背景：缩放和对焦使得成像透镜的出射光线的角度变化太大,就会出现问题,如成像元件微型透镜中的暗角,以及低通作用的变化。我们不希望成像元件中产生光损失,因为它会导致最终图像周边的亮度降低。在设计阶段,无论对外围光线考虑得多么充分,缩放导致的出射光线角度的大幅变化仍会使得最终图像的周边是暗的。这是光学设计中一个主要的约束,而且限制了设计时可供使用的变焦类型。
图2.18比较了紧凑型胶片相机和紧凑型数码相机中变焦镜头在变焦时引起的出射光线角度的变化。
远心镜头，在紧凑型数码相机的变焦镜头中,广角模式和远景模式之间没有太大区别,而且光线的角度总是近似与光轴平行,这被称为远心镜头。

6.设计中对大批量生产的考虑

成像元件的像素间距减小，导致数码相机成像光学器件的焦深也很小，制造难度大，大批量生产，单个组件要有更高的制造精度标准， 还意味着高效和高精度的调整必须成为装配过程中关键的一部分。

四、数码相机成像镜头变焦类型及其应用

1.视频变焦类型

在这种变焦中,第一个透镜组是一组能力相对较高的凸透镜,而且缩放过程中几乎所有的放大都是由焦度相对较强的第二组的凹透镜完成的。总之,尽管这类镜头也可以配置5~6组透镜,但大部分还是由4组透镜组成,而且最后一组凸透镜用于对焦。
这种变焦类型使得变焦时出射光线的角度变化很小,i而且最适合高倍率应用。另外,通过保持组中焦度分配具有较大的灵活性和增加结构中使用的透镜元件的数目,可以设计这些镜头使其光学性能可以应对大数量的像素。然而,因为很难减少结构中总的透镜数,而且第一组透镜的直径很大,所以减小镜头的尺寸很困难,而且会使得成本上升。目前市面上所有的10倍变焦镜头都属于这种类型。

2.多组移动变焦镜头

这种变焦类型的镜头有4_{5组透镜,但并不属于之前的类型。在这类镜头中,**第一组可以是凸透镜也可以是凹透镜**,这取决于镜头的指标和应用目目的。这种类型的镜头在某种程度上可以微型化;然而,它们也能同时做到4-5倍的变焦倍率以及在应用于大规模像素的同时实现高性能。如果第一组凸透镜相对较弱,我们在设计时可以采用相对较大的F数(大约是F2)。如果第一组是凹透镜,则可以作为广角设备起始端变焦透镜的理想选择。然而,这些镜头不适用于超紧凑的应用,而且就成本而言,它被看做面向高端市场的产品。目前市面上的变焦镜头中,F2左右、放大倍率在3}4倍之间的很可能就属于这种类型。

3.短变焦镜头

这是目前紧凑型数码相机成像光学系统中使用最广泛的变焦类型。它一般由第一凹透镜组、用来改变放大倍率的第二凸透镜组和用来对焦的第三凸透镜组构成。只配置有两组透镜的短变焦镜头也已面世多年。近来,市面上已经出现了由四个透镜组构成的、介于短变焦类型和之前提到的多组移动变焦类型之间的镜头。
第一组中包含一个用来校正畸变的非球面透镜,但当第一组完全由球面透镜元件组成时,第一个透镜(离物体最近的透镜)则是凸透镜。第二组中一般没至少使用一个非球面透镜。这种变焦类型最适合超紧凑应用,因为它有利于减少透镜组件的数目。但这一变焦类型不A适用于高放大倍率,因为变焦时导致的出射光线的角度变化很大,而且F数也变化很大。目前短变焦的极限放大倍率是4倍。

总结，很多都是基础概念，咱们就直接拿原文来看。这里面比较重要的是MTF调制传递函数会经常用到。