【第一章 · 绪论】

第一章 · 绪论

---

总结

什么是数字图像处理

数字图像定义

 一幅图像可定义为一个二维函数f（x，y），其中x和y是空间平面坐标，而在任何一对空间坐标（x，y）处的幅值f称为图像在该处的强度和灰度。当x，y和灰度值f是有限的离散数值时，我们称该图像为数字图像。

数字图像处理

数字图像处理是指借助于数字计算机来处理数字图像。
注意：数字图像是由有限数量的元素组成的，每个元素称之为图画元素、图像元素或像素。像素是广泛用于表示数字图像元素的术语。

数字图像处理的过程：

• 采集图像：首先需要通过一定的设备采集到数字图像。
• 噪声去除：由于采集设备或传输过程中受到的干扰，图像中可能会存在一些噪声，需要进行去除和滤波处理。
• 边缘提取：通过检测图像中的边缘信息，可以更好地描述图像的特征和结构。
• 对比度增强：调整图像的亮度和对比度，以使图像更加清晰明了。
• 分割：将图像分割成不同的区域，以便更好地对每个区域进行分析和处理。
• 阈值处理：通过设置阈值，将图像中的像素分为不同的等级或分类。
• 形态学处理：利用形态学操作（如膨胀、腐蚀、开运算、闭运算等）对图像进行处理，对图像细节进行调整和优化。
• 图像复原：针对图像中的缺陷或失真进行修复和复原，以还原图像本来的特征和结构。

数字图像成像过程

太阳光打到物体上——（形成反射）——到成像设备上——形成模拟图像——（空间采样）——（量化）——最终形成数字图像

数字图象处理系统的组成（填空/解答/画图）

• 图像输入：将模拟图像（如照片、扫描图像等）转换为数字信号，也就是图像的数字化过程。这个过程可以通过扫描、相机、传感器、图像采集卡等设备实现。
• 图像存储：将数字化的图像保存在计算机中，以便后续的图像处理和分析。常用的图像格式有JPEG、PNG、GIF和BMP等。
• 图像通信：将数字化的图像通过网络、互联网或其他通信渠道传输。这个过程需要使用压缩算法来减少图像的数据量。
• 图像处理和分析 ：对数字化的图像进行处理和分析，以提取图像中的有用信息。常用的图像处理操作包括去噪、图像增强、边缘检测、分割、特征提取等。
• 图像输出：将处理后的图像输出到显示器、打印机、存储设备或其他输出设备上。常用的图像输出格式有JPEG、PNG等。

指纹识别系统的处理流程

• 预处理：改善图象的质量，为后续处理作好准备。数字信号被送到预处理算法中，去掉噪声和其他干扰因素，使得指纹图像更加清晰。
• 图像分割：把一幅图象划分成背景和目标，非常重要但也很困难。
• 特征提取：表示与描述。预处理后的指纹图像被送到特征提取算法中，该算法通过扫描指纹图像，提取出指纹的独特特征，如细节纹路和岭谷特征。
• 指纹识别（匹配）+知识库（数据存储）。提取出指纹特征后，系统将与预先存储在数据库中的指纹特征进行匹配。如果匹配成功，则用户认证成功，否则认证失败。

思考问题

请说明图像数学表达式f(x,y)中各参数的含义

• x和y：表示图像的空间平面坐标系，用于定位像素点。
• f：表示图像的强度或灰度函数，即图像在每个空间坐标（x,y）处的亮度或颜色值。

一个数字图像处理系统由哪几个模块组成？试说明各模块的作用

• 组成：图像输入、图像存储、图像输出、图像通信、图像处理和分析
  各模块作用：
• 图像输入模块：获取图像数据，通过图像采集设备将模拟图像转化为数字图像，或直接从存储设备中读出数字图像数据。
• 图像存储模块：主要用来存储图像信息，便于处理与分析。
• 图像输出模块：将处理前后的图像显示出来或将处理结果永久保存。
• 图像通信模块：对图像信息进行传输或通信。
• 图像处理与分析模块：数字图像处理与分析模块包括处理算法、实现软件和数字计算机以完成图像信息处理的所有功能。

基本概念

数字图像处理（也就是利用数字计算机对数字图像进行处理。）

图像的定义：

图像可以定义为函数f(x,y)，其中 x和y表示空间(平面)坐标；在任意（x,y）坐标上的幅值f表示强度和灰度。

什么是数字图像？

将x，y和灰度值f是有限的离散数值的图像称为数字图像。

什么是数字图像处理？

定义：数字图像处理是指借助于数字计算机来处理数字图像。
注意：数字图像是由有限数量的元素组成的，每个元素称之为图画元素、图像元素或像素。

什么是像素？

像素是广泛用于表示数字图像元素的术语。

模拟图像和数字图像

• （1）模拟图像：
  定义：又称连续图像，是指在二维坐标系中连续变化的图像，即图像的像点是无限稠密的，同时具有灰度值(即图像从暗到亮的变化值)。连续图像的典型代表是由光学透镜系统获取的图像，如人物照片和景物照片等，有时又称模拟图像。
  特点：光照位置和光照强度均为连续变化的。
  公式：I = F（x，y)
  描述方式：函数
• （2）数字图像：
  定义：又称数码图像或数位图像，是二维图像用有限数字数值像素的表示。由数组或矩阵表示，其光照位置和强度都是离散的。数字图像是由模拟图像数字化得到的、以像素为基本元素的、可以用数字计算机或数字电路存储和处理的图像。
  公式：I = f（x，y）
  描述方式：矩阵或数组
• - 模拟图像到数字图像是如何转换的
  采样（空间）——量化（亮度）
• （3）图像处理：
  定义：图像处理(image processing)：就是对图像信息进行加工处理和分析，以满足人的视觉心理需要和实际应用或某种目的的要求。（如压缩编码或机器识别）
  实质：即利用计算机对数字图像进行处理。
  优点： 精度高、再现性好、方法易变、灵活度高。
  缺点：处理速度受到计算机和数字器件的限制，一般也是串行处理，因此处理速度较慢。

注意

• 一、空间位置和灰度： 是像素或像元的属性。
• 二、空间坐标和灰度（亮度）均用离散的数字（一般是整数）表示的图像。
• 三、什么是像素和像元
  像素：基本元素称为像素（Pixel）。
  是指在由一个数字序列表示的图像中的一个最小单位，称为像素。
  像元：又称像素点或像元点。即影像单元(picture element)。是组成数字化影像的最小单元。

图像处理的三个层次

a、低级处理：对图像进行各种加工以改善图像的效果，为图像分析做准备。（如图像缩放、图像平滑）图像——>图像。
- 简单的点运算（低级处理）
- 去除噪声（低级处理）
- 图像的增强（低级处理）
b、中级处理（图像分析）：对图像中感兴趣的目标进行检测和测量(特征提取)，以获得客观的信息。 （如区域分割、边界检测）。图像——>数据
- 图像的分割（中级处理）——心腔容积的大小
c、高级处理（图像理解）：研究图像中各目标的性质和其相互关系，理解图像的含义(如无人驾驶，自动机器人)。
- 人脸跟踪与识别（高级处理）

数字图像处理基本过程

• 采集图像：首先需要通过一定的设备采集到数字图像。
• 噪声去除：由于采集设备或传输过程中受到的干扰，图像中可能会存在一些噪声，需要进行去除和滤波处理。
• 边缘提取：通过检测图像中的边缘信息，可以更好地描述图像的特征和结构。
• 对比度增强：调整图像的亮度和对比度，以使图像更加清晰明了。
• 分割：将图像分割成不同的区域，以便更好地对每个区域进行分析和处理。
• 阈值处理：通过设置阈值，将图像中的像素分为不同的等级或分类。
• 形态学处理：利用形态学操作（如膨胀、腐蚀、开运算、闭运算等）对图像进行处理，对图像细节进行调整和优化。
• 图像复原：针对图像中的缺陷或失真进行修复和复原，以还原图像本来的特征和结构。

数字图像处理的起源与发展

1.20世纪20年代——> 第一次通过海底电缆传输图像。
（一）1921年用电报打印机采用特殊字符在编码纸带中产生的图像。
（二）1922年在信号两次穿越大西洋后，从穿孔纸带得到的数字图像。
（三）美国将军潘兴和法国元帅福熙的照片，是在1929年从伦敦到纽约使用15级色调设备通过电缆传送的。
2.20世纪60年代早期 ——>第一台执行有意义的图像处理任务的大型计算机。
美国航天器传送的第一张月球照片，“旅行者7号”卫星1964年7月31日9点09分（东部白天时间）在光线影响月球表面17分钟时摄取的图像
计算机的发展,空间项目开发利用计算机改善空间探测器发回的图像工作 。
3.20世纪60年代末、70年代初——>用于医学图像、地球遥感、天文学等领域。

• 头部CT图像
• 胸部X射线图像
• 计算机轴向断层术 (CAT,CT) 获诺贝尔医学奖

4.至今广泛用于工业、医学、生物科学、地理学、考古学、物理学、天文学等多个领域。

• 太空技术：航天技术、空间防御、天文学
• 生物科学：生物学和医学
• 刑事/物证：指纹、人脸分析
• 国防：军事探测
  工业应用：产品检测
  日常生活应用：照片编辑、影视制作。

5.利用图像处理技术帮助解决机器感知问题

数字图像处理的应用实例

根据信息源分类 （电磁波谱）

根据光子能量排布的电磁波

Gamma射线（伽马射线）

定义： Gamma射线，是指原子衰变裂解时放出的射线之一。

特点：

• 优点：电磁波波长极短、穿透力很强、携带高能量
• 缺点：容易造成生物体细胞内的DNA断裂进而引起细胞突变、造血功能缺失、癌症等疾病。

应用

• 骨骼扫描：是一种医学影像技术，可用于检测骨骼中的异常区域。这种技术使用放射性示踪剂注入体内，然后使用伽马射线探测器来检测放射性示踪剂在骨骼中的分布。在扫描过程中，探测器会记录示踪剂放射出的伽马射线，并生成一幅图像，以显示骨骼中的异常区域。这种技术可以用于检测骨折、骨肿瘤、骨髓炎等骨骼问题。
• PET图像：PET图像是一种医学图像，用于诊断和研究疾病。PET技术通过注射一种有放射性同位素的药物（tracer）进入人体，等待其在身体内分布后，再使用伽马射线探测器（detector）检测由该药物放射的伽马射线。这些射线传递到计算机上，生成一幅图像，显示出各个部位的药物分布情况。PET图像通常用于癌症、心脏病和神经疾病等疾病的诊断。通过该图像，医生可以确定病变区域的位置、大小和形状，从而制定最佳治疗方案。
• 核医学： 这种方法是将放射性同位素注射到人体内，当这种物质衰变时就会放射出伽马射线，然后用伽马射线检测仪收集到的放射线来产生图像。
• 天文观测：伽马射线是一种极高能的电磁辐射，由于能量极高，其波长极短，因此很难被传统的光学望远镜观测到。伽马射线的产生机制多种多样，包括宇宙射线与星际介质相互作用、星系合并、超新星爆发等。为了观测伽马射线，科学家采用了一种称为伽马射线望远镜的仪器。伽马射线望远镜通过测量伽马射线的方向、能量、持续时间等信息，可以确定伽马射线的源头，并研究伽马射线的产生与传播机制。目前，伽马射线望远镜已经成为了研究宇宙中极高能物理现象的重要手段，对于我们认识宇宙、理解宇宙演化具有重要意义。

X射线

发现：

1895年，德国物理学家伦琴在研究阴极射线管的过程中发现，故又称伦琴射线。最早用于成像的电磁辐射源之一。

X射线的本质： X射线本质是电磁波。

• 具有一定的波长和频率，具有波粒二象性。
• X射线成像利用了它与物质相互作用时发生能量转换，突出了微粒性。
• X射线是从原子内部发射出来的波长很(0.0006~50nm)的高能量的光子流。

X射线波长范围：

• 介于紫外线与Ƴ射线之间，其波长很短约介于0.01~100埃之间。
• 它的波长X线诊断常用的波长为0.008~0.031nm。

X射线性质

物理效应

• 贯穿本领：射线能够穿透物质。
• 荧光作用：射线照射使物质发出荧光, 在医学上 用于透视 。
• 电离作用：射线使物质原子、分子发生电离。
  测量 X射线的基础。

化学效应：

射线使多种物质发生光化学反应，使照相底片感光。

• X射线摄影的基础。

生物效应：

• 射线照射使生物体发生电离和激发，引起一系列生理、病理变化。 放射治疗。同时要注重防护射线。

X射线产生

X射线产生的两个基本条件

• （1） 高速运动的电子流；
• （2）阻止电子运动的适当的障碍物(靶)

原理图

X射线产生装置

X射线管的构造：

• 外壳：硬质玻璃管，高真空。
• 阴极：电子源，发射电子流（钨丝）。
• 阳极：靶，受高速电子轰击而辐射X射线。

构造图

X射线的强度与硬度

X射线的强度：

是指单位时间内通过垂直于射线方向的单位面积的辐射能量；

X射线的硬度：

指X射线的贯穿本领，它只取决于X射线的波长，即光子的能量，与光子数目无关。

实质：

能量大的光子被物质吸收少，其贯穿本领强，相应的射线硬度大。

分类（X射线按照硬度分类）

注：通常用管电压的千伏数(kV)来表示X射线的硬度。

X射线应用

诊断

• X 射线透视
  荧光透视（fluoroscopy）：简称透视。强度均匀的X射线投照人体，由于人体内不同部分对射线衰减不同，使透过人体的射线强度不均匀, 投射到荧光屏后显示出明暗不同的荧光图像。
• X线摄影
  X射线透过人体后投射到照相底片上，底片感光显像后可观测到明暗不同的图像。
• X射线造影术
  给器官或病灶注射衰减系数较大或较小的物质来增加它与周围组织的对比以便清晰显像。
• 数字减影血管造影(DSA):
  通过图像处理器将“原像”和“造影像”相减,从造影像中减去原像,使造影的血管图像保留下来而减影除去无关的组织影像。
• X射线计算机断层成像（X-CT ， X-ray computed tomography)：
  应用物理技术和计算机处理，测定X射线的衰减系数在人体中某断层面上的二维分布矩阵，利用图像重建原理,获得该断层面图像。

治疗

• 治疗癌症：X射线对人体组织的电离作用，直接破坏细胞，尤其对分裂旺盛的癌细胞。
• Ｘ刀----21世纪治疗肿瘤新技术:Ｘ刀（也称光子刀）是一种立体定向放射治疗技术。
  在ＣＴ图像引导下,利用三维立体定向原理将直线加速器产生的高能X射线从空间三维方向上聚焦集中照射到病灶的一种新技术，由于X射线能够准确的按照肿瘤的生长形状照射，使肿瘤组织和正常组织之间形成整齐的边缘，像用手术刀切除的一样,故称为“X-刀”。

医学影像技术是实现“早诊早治”的重要技术手段与保障

• 组织器官——细胞——分子
• 对应检查射线
  看得到——X-ray（1901）
  看得清——CT（1979）
  看得准——MRI（2003）
  看得早——RET/CT

紫外线成像

应用：

• 部分用法原理
  紫外光用于荧光显微镜方法中，这是显微镜方法中发展最快的领域之一。荧光是在19世纪中叶发现的一种现象。非荧光材料的背景越暗，设备越有效。
  荧光显微镜方法在研究可产生荧光的材料时的确是一种很优秀的方法，无论是以它们的自然形式(原发荧光)，还是经化学处理后具有荧光能力(次生荧光)。
• 应用多种多样，包括平板印刷术、工业检测、显微镜方法、激光、生物成像和天文观测等。
  例如
  (1)观察普通玉米谷物
  (2)观察被真菌感染的谷物
  (3)观察天鹅星座环

可见光与红外波段成像（我们最熟悉）

主要波段

应用

• 利用可见光显微镜获取的图像
  (1)紫杉酚 250倍
  (2)胆固醇 40倍
  (3)微处理器 60倍
  (4)镍氢化物薄片 600倍
  (5)有机超导 450倍
  (6)音频CD表面 1750倍

• 利用图像处理技术检测产品
  (1)电路板
  (2)封装的丸剂
  (3)瓶子
  (4)清洁塑料上的气泡
  (5)谷物
  (6)目镜掺杂物
  (7)指纹
  (8)纸币
  (9)自动读取牌照

• 红外线成像——红外线频率

微波波段成像 ——遥感图片

微波段成像 （雷达）

优点： 不受气候、光照条件影响，可以穿透云层，通过植被、冰层和极干燥地区
天气预报
军事应用

无线电波段成像

主要用于医学和天文学

• 核磁共振成像(MRI)——医学
  例
  (1) 膝盖、脊柱核磁共振成像
• 覆盖电磁波谱的蟹状脉冲星图像——天文学
  例
  (1)伽马
  ​(2)X射线
  ​(3)可见光
  ​(4)红外
  ​(5)无线电波

其他图像成像方式

声波成像

• 地震模型横截面图像

超声波成像

• 观察胎儿
• 观察甲状腺
• 观察肌肉层有损害

电子显微镜成像

• 过热损坏的钨丝 250倍
• 观察损坏的集成电路 2500倍

计算机合成

• 计算机合成图片

数字图像处理流程

由图像到图像

图像获取 ——

• 是数字图像处理的第一步处理。
• 注意:图像获取与给出一幅数字形式的图像一样简单。通常，图像获取阶段包括图像预处理，譬如图像缩放。

图像增强——主观

**是对一幅图像进行某种操作，使其结果在特定应用中比原始图像更适合进行处理。**特定一词在这里很重要，因为一开始增强技术就建立在面向问题的基础之上。
目的:图像增强的目的是突出图像中（主观）感兴趣的部分，而减弱或去除不需要的信息，从而使有用信息得到加强，便于区分或解释。
例如
对于增强X射线图像十分有用的方法，对于增强电磁波谱中红外波段获取的卫星图像可能就不是最好的方法。
没有图像增强的通用“理论”。当为视觉解释而处理一幅图像时，观察者就是特殊方法工作好坏的最终裁判者。增强技术是如此多种多样，以至于有众多不同的图像处理方法。

图像恢复——客观

目的 图像恢复处理的主要目的是去掉干扰和模糊，恢复图像的本来面目。典型的例子如去噪就属于复原处理。
也是改进图像外观的一个处理领域。然而与图像增强不同，图像增强是主观的，而图像复原是客观的;在某种意义上说，复原技术倾向于以图像退化的数学或概率模型为基础。另一方面,增强以什么是好的增强效果这种人的主观偏爱为基础。

彩色图像处理

已经成为一个重要领域、因为互联网上数字图像的使用在在不断增长。

小波

是以不同分辨率来描述图像的基础。 特别是，本书中为图像数据压缩和金字塔表示使用了小波，在这里，图像被成功地细分为较小的区域。

压缩

定义
指的是减少图像存储量或降低传输图像带宽的处理。
不足
虽然存储技术在过去的10年里已有明显改进，但对于传输能力我们还不能这样说。尤其在互联网的应用上更是如此，互联网是以大量图片内容为特征的。多数计算机用户都很熟悉(也许并未注意)图像压缩所用的图像文件扩展名，如JPG文件扩展名用于JPEG(联合图片专家组)图像压缩标准。

形态学处理

涉及提取图像分量的工具，这些分量在表示和描述形状方面很有用。

图像分割

定义
将图像中包含的物体，按其灰度或几何特性等划分为若干个有意义的区域的技术成为图像分割。
分割过程将一幅图像划分为它的组成部分或目标。 通常，自动分割是数字图像处理中最困难的任务之一。成功地把目标逐一识别出来是一个艰难的分割过程。
另一方面，很弱的且不稳定的分割算法几乎总是会导致最终失败。通常，分割越准确，识别越成功。

表示与描述

几乎总是在分割阶段的输出之后，通常这一输出是未加工的像素数据，这些数据不是构成一-个区域的边界(即分隔一个图像区域与另一个图像区域的像素集合)，就是构成该区域本身的所有点。无论哪种情况，把数据转换成适合计算机处理的形式都是必要的。
首先，必须确定数据是应表示为一条边界还是应表示为整个区域。如果关注的是外部形状特征，譬如角点和拐点，则表示为边界是合适的。如果我们关注的是内部特性，例如纹理或骨架形状，则区域表示是合适的。在某些应用中，这些表示彼此是互补的。选择一种表示仅是解决把原始数据转换为适合计算机进行后续处理的形式的一部分。为了描述数据以使感兴趣的特征更明显，必须确定一种方法。描述又称为特征选择，涉及提取特征，它可得到某些感兴趣的定量信息，或是区分一组目标与其他目标的基础。

识别

是基于目标的描述给该目标赋予标志(譬如“车辆”)的过程。
注意
不是所有的图像处理应用都需要给出的复杂交互。
事实上，在某些情况下甚至并不需要所有这些模块。
例如，用于人眼视觉解释的图像增强就很少要求使用图中的任何其他步骤。
然而，通常随着图像处理任务复杂性的增加、需要做更多处理才能解决问题。

指纹识别系统的处理流程

• 预处理：改善图象的质量，为后续处理作好准备。数字信号被送到预处理算法中，去掉噪声和其他干扰因素，使得指纹图像更加清晰。
• 图像分割：把一幅图象划分成背景和目标，非常重要但也很困难。
• 特征提取：表示与描述。预处理后的指纹图像被送到特征提取算法中，该算法通过扫描指纹图像，提取出指纹的独特特征，如细节纹路和岭谷特征。
• 指纹识别（匹配）+知识库（数据存储）。提取出指纹特征后，系统将与预先存储在数据库中的指纹特征进行匹配。如果匹配成功，则用户认证成功，否则认证失败。

数字图象处理系统的组成（填空/解答/画图）

• 图像输入：将模拟图像（如照片、扫描图像等）转换为数字信号，也就是图像的数字化过程。这个过程可以通过扫描、相机、传感器、图像采集卡等设备实现。
• 图像存储：将数字化的图像保存在计算机中，以便后续的图像处理和分析。常用的图像格式有JPEG、PNG、GIF和BMP等。
• 图像通信：将数字化的图像通过网络、互联网或其他通信渠道传输。这个过程需要使用压缩算法来减少图像的数据量。
• 图像处理和分析 ：对数字化的图像进行处理和分析，以提取图像中的有用信息。常用的图像处理操作包括去噪、图像增强、边缘检测、分割、特征提取等。
• 图像输出：将处理后的图像输出到显示器、打印机、存储设备或其他输出设备上。常用的图像输出格式有JPEG、PNG等。