数字图像处理-第八周-理论课

变换编码

变换编码是在图像变换域进行，相当于频域方法
变换域编码：图像变换——系数量化和编码
自适应变换编码：可以根据局部图像内容进行适应性调整
非自适应变换编码：变换编码步骤对所有子图像都是固定的
变换（基本概念）
二维变换：
正变换
$$T(u,v)=\sum _{x=1}^{M-1}\sum _{y=0}^{N-1}f(x,y)r(x,y,u,v)$$
$r(x,y,u,v)$正变换核
反变换
$$f(x,y)=\sum _{u=1}^{M-1}\sum _{v=0}^{N-1}T(u,v)s(x,y,u,v)$$
$s(x,y,u,v)$反变换核
可分离变换核：$r(x,y,u,v)=r_1(x,u)r_2(y,v)$
可分离核的二维变换可以分成两个一维变换分步进行
1.沿着f(x,y)的每一列作一维变换，得到
$$T(u,y)=\sum _{x=0}^{M-1}f(x,y)r_1(x,u)$$
$$T_{u,y}=R_{u,x}{F}_{x,y}=R{F}_{x,y}$$
2.沿着T(u,y)的每一列作一维变换，得到
$$T(u,v)=\sum _{y=0}^{N-1}T(u,v)r_2(y,v)$$
$$T_{u,v}=(R{T}_{u,y}^T{)}^T=T_{u,y}{R}^T=R{F}_{x,y}{R}^T$$
$T=RF{R}^T$如果变换核是对称的$R=R^T$
则有$T=RFR$

S是反变换矩阵
$$\begin{gathered} F=ST{S}^T \\ =SRF{R}^T{S}^T \end{gathered}$$
当$S=R^{-1}$时$F=F$
一维变换：
正变换
$$T(u)=\sum _{x=1}^{M-1}f(x)r(x,u)$$
反变换
$$f(x)=\sum _{u=1}^{M-1}T(u)s(x,u)$$

图像变换分类：
1统计变换：
1.1KL变换:
KL最佳正交变换：变换后系数不相关，数值较大的方差只在少数系数中出现，变换域能量高度集中。
离散K-L变换：
对向量x用确定的完备正交归一向量系$u_j$展开
$$\begin{gathered} x=\sum _{j=1}^{\infty }{y}_j{u}_j \\ {u}_i^T{u}_j={\delta }_{ij} \end{gathered}$$
$x\to y$
K-L变换的向量展开表示：
$$x=\sum _{j=1}^d{y}_j{u}_j{y}_j=u_j^{T}x$$
K-L变换的矩阵表示：
$$x=[u_1,u_2,..,u_d]u=Uyy=U^{T}x$$
离散K-L变换的均方误差：
用有限项估计x：
$$\epsilon =E[(x-\hat{x}{)}^T(x-\hat{x})]$$
该估计的均方误差：
$$\begin{gathered} \epsilon =E[\sum _{j=d+1}^{\infty }{y}_j^2] \\ =E[\sum _{j=d+1}^{\infty }{u}_j^{T}x{x}^T{u}_j] \\ =\sum _{j=d+1}^{\infty }{u}_j^{T}R{u}_j \end{gathered}$$
其中$R=[r_{ij}=E(x_i,x_j)]=E[x{x}^T]$
求解最小均方误差获得正交基
用Lagrange乘子法：
如果
$$R{u}_j={\lambda }_j{u}_j$$
那么
$$\epsilon =\sum _{j=d+1}^{\infty }{u}_j^{T}R{u}_j$$取得极值
结论：以相关矩阵R的d个本征向量为基向量展开x时，其均方误差为：
$$\epsilon =\sum _{j=d+1}^{\infty }{\lambda }_j$$

K-L变换：当取矩阵R的d个最大本征值对应的本征向量来展开x时，其截断均方误差最小。这d个本征向量组成的正交坐标系称作x所在的D为空间的d维K-L变换坐标系，x在K-L坐标系上的展开系数向量y称作x的K-L变换。

K-L变换操作步骤：
对R的的特征值由大到小进行排队：
$${\lambda }_1\ge {\lambda }_2\ge ...\ge {\lambda }_d\ge {\lambda }_{d+1}\ge ...$$
均方误差最小的x的近似式：
$$X=\sum _{j=1}^d{y}_j{u}_j$$
矩阵形式：
$$X=Uy$$
式中$y=[y_1,y_2,...,y_d{]}^T{U}_{n\times d}=[u_1,...,u_j,...u_d]$
其中$u_j=[u_{j1},u_{j2},...,u_{jn}{]}^T$
$$u_i^T{u}_j={\delta }_{ij}{U}^{T}U=I$$
对两边左乘$U^T$
$$y=U^{T}X$$
系数向量$y$就是变换后的模式向量

K-L变换的性质：
$y$的相关矩阵是对角矩阵
$$\begin{array}{rl}E[y_i{y}_j]& =E[u_i^{T}x{x}^T{u}_j]\\ & =u_i^{T}E[x{x}^T]u_j\\ & =u_i^{T}R{u}_j\\ & =u_i^T{\lambda }_j{u}_j\\ & ={\lambda }_i{\delta }_{ij}\end{array}$$
$$\begin{gathered} E[y{y}^T]=E[U^{T}x{x}^{T}U] \\ =U^{T}RU=对角阵 \end{gathered}$$

K-L坐标系把矩阵R对角化，即通过K-L变换消除原有向量x的各分量间的相关性，从而有可能去掉那些带有较少信息的分量以达到降低特征维数的目的。
K-L变换的几何解释：

KL变换与另外两个概念的关系
KLT是建立在统计特性基础上的一种变换
PCA的变换矩阵是协方差矩阵，K-L变换的变换矩阵可以有很多种（二阶矩阵、协方差矩阵、总类内离散度矩阵等）。当K-L变换矩阵为协方差矩阵时，等同于PCA。

K-L变换在图像压缩上的优点
从图像本身获取正交变换核，在均方误差最小的意义上，是针对于当前数据的最优变换核。在这个变换核下，变换域的能量集中在少数几个正交基向量上，从而可以利用这个特点来降低信息表达的维度。

K-L变换的在图像压缩上的局限性
（1）需要通过足够多的样本估计样本集的协方差矩阵或其它类型的散布矩阵。即，当前视图为多个列向量构成，则列数不能太小。
（2）计算矩阵的本征值和本征向量缺乏统一的快速算法
（3）K-L变换变换核是根据数据计算出来的，不固定，不适用于图像压缩的应用场景。因为变换核本身也需要保存供解码时使用。
（4）K-L只作理论分析时使用，可作为其它变换编码算法的评估标准。

图像压缩对变换的需求
变换核对于加码器已知，无需从压缩数据中获得。

2.可分离变换：
2.1傅里叶变换
2.2离散余弦变换：
1D DCT
一维离散余弦变换的正变换核为：
$$g(x,u)=a(u)cos[\frac{(2x+1)u\pi }{2N}]x=0,1,...,N-1u=1,2,...,N-1$$
$$a(u)=\{\begin{array}{r}\sqrt{1/N},\text{ 当 }u=0\\ \sqrt{2/N},\text{ 当 }u=1,2,\cdots ,N-1\end{array}$$
正变换表示为
$$C(u)=\sum _{x=0}^{N-1}a(u)f(x)\cos \left[\frac{(2x+1)u\pi }{2N}\right]$$
一维DCT的反变换核与正变换核一致，即
$$h(x,u)=g(x,u)$$
反变换表示为
$$f(x)=\sum _{u=0}^{N-1}a(u)C(u)\cos \left[\frac{(2x+1)u\pi }{2N}\right]$$

2D DCT
$$g(x,y,u,v)=a(u)a(v)\cos \left[\frac{(2x+1)u\pi }{2N}\right]\cos \left[\frac{(2y+1)v\pi }{2N}\right]u,v=0,1,...,N-1$$
$a(v)$与$a(u)$定义类似，DCT的反变换核与正变换核一致：$h(x,y,u,v)=g(x,y,u,v)$
$$f(x,y)=\sum _{u=0}^{N-1}\sum _{v=0}^{N-1}a(u)a(v)C(u,v)\cos \left[\frac{(2x+1)u\pi }{2N}\right]\cos \left[\frac{(2y+1)v\pi }{2N}\right]x,y=0,1,...,N-1$$
DCT应用：
离散余弦变换在图像压缩中具有广泛的应用，是JPEG图像压缩标准的基本推荐算法。

• 将图像分解为8×8或者16×16的图像块
• 对每个图像块进行二维DCT变换
• 舍弃高频部分接近于0的DCT系数值，将量化的DCT系数进行编码和传送，形成压缩后的图像格式
• 在接收端，将量化的DCT系数进行解码
• 对每个8×8或者16×16的图像块进行二维DCT反变换，将各块组合成单个图像

2.3沃尔什变换：
1-D沃尔什变换
正变换
反变换
2-D沃尔什变换

• 沃尔什变换本质上将一个函数变换为取值为+1或-1的基向量构成的级数；
• 类似于频率函数，但又不同于频率函数；
• 以过零点数目代替频率的概念，称为序率；
• 沃尔什变换具有某种能量集中。而且原始数据中数字越是分布均匀，经变换后的数据越集中于矩阵的边角上。因此沃尔什变换可以压缩图像信息。且变换比傅里叶变换快。
  2.4哈达玛变换：
• 哈达玛变换本质上是一种特殊排序的沃尔什变换；
• 其与沃尔什变换的区别是变换核矩阵行的次序不同；
• 哈达玛变换最大优点在于变换核矩阵具有简单的递推关系，即高阶的变换矩阵可以用低阶转换矩阵构成。
  2.5小波变换

应用

JPEG编码标准

变换选择：
子图选择：
量化器设计：
标准详解：
JPEG
定义3种编码系统：

• 基于DCT的有损编码基本系统
• 基于分层递增模式的扩展/增强编码系统，用于高压缩比、高精度或渐进重建应用
• 基于预测编码中DPCM方法的无损系统，用于无失真应用场合

输入和输出数据8比特，而量化后的DCT值限制为11比特
1.图像首先被细分为8×8的像素块，对这些像素块按从左到右、从上到下的方式进行处理。当遇到每个8×8的块或子图像时，其64个像素通过减去128进行灰度级移动。然后计算该块的DCT。
2.用标准化矩阵对DCT系数进行量化。
3.将量化后的数据按照Z形排列，形成一个量化的系数序列。
4.非零AC(交流)系数使用定义系数值和前面零的个数的一种变长码来进行编码。DC(直流)系数是相对于前一幅子图像的DC系数的差值编码。
5.将DC部分和AC部分分别用各自的霍夫曼编码表编码。

JPEG彩色图像压缩
RGB->Y La Lb （Y：明度）
由于人眼对颜色的空间分辨能力低于对亮度的分辨能力，因此对亮度和色彩分量采用不同的压缩率。
1.将色彩分量降低1倍分辨率，然后按照灰度的方式压缩
2.色彩分量采用与灰度不同的量化矩阵和霍夫曼表

图像编码国际标准
1.二值图像压缩编码
G3
G4
JBIG
2.静态图像压缩编码
JPEG
H.261
MPEG-I
MPEG-II
MPEG-IV
MPEG-VII
3.动态图像压缩编码

数字水印