图像处理基础随记

     图像由像素构成，即图像中的小方格，这些小方格当中都有被分配好的明确的位置和色彩值，而这些小方格的颜色和位置决定了该图像所呈现出来的样子。像素是图像当中的最小的单位。

    图像空间分配率，图像数字化的空间精细程度。 

灰度图像

   每个像素只有一个采样颜色的图像，这类图像显示为从最黑暗色到最亮色的白色的灰度。理论上可以采样任何颜色的深浅。灰度图像和黑白图像不同，计算机领域的黑白图像只有两种颜色，而灰度图像在黑色与白色之间仍存在许多不同级的颜色深度。灰度图像经常是在单个电磁波频谱如可见光内测量每个像素的亮度得到的，用于显示的灰度图像通常用每个采样像素8位的非线性尺度来保存，这样可以有256级灰度

二值图像

   即一幅二值图像的矩阵金由0和1组成，“0”代表黑色，“1”代表白色。由于每一个像素矩阵中每一个元素的取值仅由0、1两种可能。二值图像通常用于文字、线条图的扫描与识别和掩膜图像的存储。

索引图像

   即索引图像即它的文件结构比较复杂，除了存放图像的二维矩阵外，还包括一个称之为颜色索引矩阵MAP的二维数组。MAP的大小由存放图像的矩阵元素值域决定，如矩阵元素值域为[0，255]，则MAP矩阵的大小为256Ⅹ3，用MAP=[RGB]表示。MAP中每一行的三个元素分别指定该行对应颜色的红、绿、蓝单色值，MAP中每一行对应图像矩阵像素的一个灰度值，如某一像素的灰度值为64，则该像素就与MAP中的第64行建立了映射关系，该像素在屏幕上的实际颜色由第64行的[RGB]组合决定。也就是说，图像在屏幕上显示时，每一像素的颜色由存放在矩阵中该像素的灰度值作为索引通过检索颜色索引矩阵MAP得到。索引图像的数据类型一般为8位无符号整形（int8），相应索引矩阵MAP的大小为256Ⅹ3，因此一般索引图像只能同时显示256种颜色，但通过改变索引矩阵，颜色的类型可以调整。索引图像的数据类型也可采用双精度浮点型（double）。索引图像一般用于存放色彩要求比较简单的图像，如Windows中色彩构成比较简单的壁纸多采用索引图像存放，如果图像的色彩比较复杂，就要用到RGB真彩色图像。

png图像采用无损压算法的位图格式，其设置目的是为了代替GIF和TIFF文件格式，同时为了增加一些GIF所没有的特性。

TIFF文件中的三个关键词是：图像文件头Image File Header(IFH)，图像文件目录Image File Directory(IFD)和目录项Directory Entry(DE)。每一幅图像是以8字节的IFH开始的， 这个IFH指向了第一个IFD。IFD包含了图像的各种信息， 同时也包含了一个指向实际图像数据的指针。

Jpg是有损bai模式png无损压模式，jpg是无透明背景，png是有透明背景。

    PSNR峰值信噪比，通常用来评价一幅图像压缩后和原图像相比质量的好坏。PSNR越高，说明压缩后的图像失真越小。
 

图像滤波器操作实际上是模板操作，对于模板操作我们应该要注意边界问题：

对于边界问题，当图像处理边界像素时，卷积核图像使用区域不能匹配时计算出现问题。

处理方法：

1. 忽略边界像素，即丢掉不能匹配的像素；
2. 保留边界像素，即复制源图像不能匹配的边界像素输出图像。

图像的空域：通过观察灰度分布来描述图像特征。频域分析把图像分解成从低频到高频的频域成分。

图像强度值变化慢的区域只包含低频率，而强度值变化快的区域产生高频率。

什么是线性滤波器？

如果一种滤波器是用领域像素的加权累加值来替换像素值，我们就说这种滤波器是线性的。而线性滤波器经常用于剔除输入信号中不想要的频率或者从许多频率中选择一个想要的频率。

低通滤波器：允许低频率通过

高通滤波器:允许高频率通过

带通滤波器：允许一定范围频率通过

带阻滤波器：阻止一定范围频率通过

全通滤波器：允许所有频率通过，仅改变相位关系。

信号处理
    重采样分为上采样和下采样，在进行采样过程中尤其需要注意采样倍率的问题。在模拟数字信号的过程中，当采样频率大于信号中最高频率的2倍时，采样后的数字信号将完整保留原始信号的信息，（一般是2.57倍），实际应用中保证采样频率是原始信号的最高频率的5—10倍，这称为奈奎斯特定理。

大于原始信号叫上采样，小于原始信号叫下采样。采样频率，定义每秒从原始连续信号中提取并组成离散信号的采样个数。

缩小图像（或称为下采样（subsampled）或降采样（downsampled））的主要目的有两个：1、使得图像符合显示区域的大小；2、生成对应图像的缩略图。放大图像（或称为上采样（upsampling）或图像插值（interpolating））的主要目的是放大原图像,从而可以显示在更高分辨率的显示设备上。对图像的缩放操作并不能带来更多关于该图像的信息, 因此图像的质量将不可避免地受到影响。然而，确实有一些缩放方法能够增加图像的信息，从而使得缩放后的图像质量超过原图质量的。

      下采样原理：

    对于一幅图像I尺寸为M*N，对其进行s倍下采样，即得到(M/s)*(N/s)尺寸的得分辨率图像，当然s应该是M和N的公约数才行，如果考虑的是矩阵形式的图像，就是把原始图像s*s窗口内的图像变成一个像素，这个像素点的值就是窗口内所有像素的均值：

 上采样原理： 

    图像放大几乎都是采用内插值方法，即在原有图像像素的基础上在像素点之间采用合适的插值算法插入新的元素。对插值图像的边缘有一定的增强， 使得图像的视觉效果更好， 边缘保护的插值方法可以分为两类： 基于原始低分辨图像边缘的方法和基于插值后高分辨率图像边缘的方法。基于原始低分辨率图像边缘的方法:( 1)首先检测低分辨率图像的边缘， 然后根据检测的边缘将像素分类处理，对于平坦区域的像素，采用传统方法插值；对于边缘区域的像素，设计特殊插值方法，以达到保持边缘细节的目的。(2)基于插值后高分辨率图像边缘的方法这类插值方法:首先采用传统方法插值低分辨率图像，然后检测高分辨率图像的边缘，最后对边缘及附近像素进行特殊处理，以去除模糊，增强图像的边缘。

混叠 

当频率大于采样频率的一半时，就会出现混叠。抗混叠滤波器一般是低通滤波器，其理论截止频率为fs/2.在ADC的硬件设计中，都需要在模拟输入端加一个低通滤波器，称为抗混叠滤波器，抗混叠滤波器用于限制最高输入频率，如果需要降低采样率，则需要在代码中实现抽取操作，在抽取前也需要抽取滤波器以限制最高频率分量，当原始信号中含有大于fs/(2D)的频率分量（采样率fs，抽取因子D），抽取后的信号会出现混叠，当使用带宽为pai/D的滤波器，可实现抗混叠。