常用的相似性度量算法

Minkowski距离

Minkowski距离是基于$L_p$范数定义的，即
$$L_p(A,B)={\left|\sum _{i=1}^n|a_i-b_i{|}^p\right|}^{\frac{1}{p}}$$
如果p=1,那么$L_1(A,B)$称为街区距离，表达如下：
$$L_1(A,B)=\sum _{i=1}^n|a_i-b_i|$$
如果p=2,那么$L_2(A,B)$称为欧氏距离，即
$$L_2(A,B)={\left(\sum _{i=1}^n|a_i-b_i{|}^2\right)}^{\frac{1}{2}}$$
如果$p=\infty$,$L_{\infty }(A,B)$称之为切比雪夫距离：
$$L_{\infty }(A,B)=max\left(\sum _{i=1}^n|a_i-b_i|\right)$$

直方图相交法

直方图相交法具有快速、简单的特点，还有个优点就是它能够有效地抑制背景产生的干扰，直方图相交法的数学表达如下：
$$d(A,B)=1-\sum _{i=1}^{n}min(a_i,b_i)$$
进一步做归一化处理得：
$$d(A,B)=1-\frac{{\sum }_{i=1}^{n}min(a_i,b_i)}{min({\sum }_{i=1}^n{a}_i,{\sum }_{i=1}^n{b}_i)}$$

二次式距离

二次式（quadratic distance)距离被用作基于颜色的直方图的图像进行检索，通过实验证明是行之有效的，这是因为二次式距离将不同颜色之间拥有的相似度纳入考虑范围之内。二次式距离表达如下：
$$d_{q}ad(A,B)=(A-B{)}^{T}M(A-B)$$
式中，$M=[m_{ij}]$,$m_{ij}$表示在直方图中下标为$i$和$j$的两种不同颜色间相似度。

余弦距离

余弦距离计算是不同的两向量间方向上的差异，他的数学描述：
$$A\cdot B=A^{T}B=|A||B|cos\theta$$

$$d_{cos}(A,B)=1-cos\theta =1-\frac{A^{T}B}{|A|\cdot |B|}$$

式中，$|A|=(A^{T}A{)}^{\frac{1}{2}},|B|=(B^{T}B{)}^{\frac{1}{2}}$

相关系数

相关系数是表示两个向量之间线性关系紧密程度的量，数学定义如下：
$$\rho (A,B)=\frac{{\sum }_{i=1}^n(a_i-\bar{a})(b_i-\bar{b})}{\sqrt{{\sum }_{i=1}^n(a_i-\bar{a}{)}^2{\sum }_{i=1}^n}(b_i-\bar{b}{)}^2}$$
两不同向量之间的距离为：
$$d_{\rho }=1-\rho (A,B)$$
式中，$\bar{a}=\frac{1}{n}{\sum }_{i=1}^n{a}_i,\bar{b}=\frac{1}{n}{\sum }_{i=1}^n{b}_i$

Kullback-Leibler散度和Jeffrey散度

Kullback-Leibler和Jeffrey（K-L）散度数学描述如下：
$$d_{kl}(A,B)=\sum _{i=1}^n{a}_{i}log\frac{a_i}{b_i}$$
式中，$a_i\ge 0$, $b_i\ge 0$ ,且${\sum }_{i=1}^n{a}_i=1$, ${\sum }_{i=1}^n{b}_i=1$。K-L散度的弊端是非对称并且对直方图柱值数非常敏感，然而改进后的Jeffrey散度具有对称性且对噪声及直方图柱值数不敏感，他的定义如下：
$$d_{ref}(A,B)=\sum _{i=1}^n\left[a_{i}log\frac{a_i}{m_i}+b_{i}log\frac{b_i}{m_i}\right]$$
式中，$m_i=\frac{a_i+b_i}{2}$

${\chi }^2$距离

${\chi }^2$距离的定义如下：
$$d_{{\chi }^2}(A,B)=\sum _{i=1}^n\frac{(a_i-m_i{)}^2}{m_i}$$
式中，$m_i=\frac{a_i+b_i}{2}$

EMD(Earth Mover’s Distance)

EMD指的是空间S中分布着m堆土$p_i,i=1,...,m$,每堆土的质量为$w_{p_i}$,同时分布有n个土坑，土坑的大小为$q_j,j=1,...,n$,每个土坑可以装土的质量为$w_{q_j}$,即$p=\Bigg{ (p_1,w_{p_1}),…,(p_m, w_{p_m})\Bigg},q=\Bigg{ (q_1,w_{q_1}),…,(q_m, w_{q_m})\Bigg} $。把所有的土填到这些坑中，一共做的功可以表示为：
$$work(p,q,f)=\sum _{i=1}^m\sum _{j=1}^{n}d(p_i,q_j)f_{ij}$$

式中，$d(p_i,q_j)$第i堆从土到第j个坑之间的距离，为了将图像距离测度与该距离区别开，称该距离为基本距离。$f_{ij}$表示为将第i堆土运到第j个坑土的质量。$d(p_i,q_j)f_{ij}$表示把第i堆土中质量为$f_{ij}$的土运到第j个坑土的质量。$d(p_i,q_j)f_{ij}$表示把第i堆土中质量为$f_{ij}$的土运到第j个坑过程中所做的功。

约束条件：
KaTeX parse error: No such environment: align at position 8: \begin{̲a̲l̲i̲g̲n̲}̲ ① f_{ij}\geq0,…

条件①说明，当每次所运土质量大于零时才开始做工；

条件②说明，从第i堆土运到各个坑土的质量一定不会大于该土的质量；

条件③说明，第j个坑能够接受的土的质量，一定不会大于该坑接受的土的最大质量，

条件④说明，从各堆土运到第j各堆土的质量，一定不会大于该土堆的质量。因此，EMD定义如下：
$$EMD(p,q)=\frac{{\sum }_{i=1}^m{\sum }_{j=1}^{n}d(p_i,q_j)f_{ij}}{{\sum }_{i=1}^m{\sum }_{j=1}^n{f}_{ij}}$$

编辑距离（Edit Distance）

编辑距离又称为Levenshtein距离，被定义为从一个串换到另一个串的最少插入、删除、替换操作。编辑距离被广泛应用在结构模式识别中。

设A表示有限的字符集和，$ϵ$表示一个空符号。编辑操作可以表示为$a\to b$,$a\to ϵ$,$ϵ\to a$,其中$a,b\in A,a\to B$代表替换操作，$a\to ϵ$代表删除操作，$ϵ\to a$代表插入操作。设$c(a\to b),c(a\to ϵ),c(ϵ\to a)$分别表示各类操作的代价，设符号$x=x_1,x_2,...,x_n,y=y_1,y_2,...,y_m$,则它们的编辑距离的计算可分为四个步骤：

step 1 $D(0,0)=0$

step 2 $Forj=1,...,m$

​ $D(0,j)=D(0,j-1)+c(ϵ\to y_i)$

step 3 $Forj=1,...,n$

​ $Forj=1,...,m$
$$D(i,j)=min\left\{\begin{array}{c}D(i-1,j-1)+c(x_i\to y_j)\\ D(i-1,j)+c(x_i\to ϵ)\\ D(i,j-1)+c(ϵ\to y_j)\end{array}\right\}$$
从以上的计算步骤可以得出，串$x$和$y$间的编辑距离$d(x,y)=D(n,m)$。

Hausdorff距离

​ Hausdorff距离是指定义在两个点集上的最大-最小(max-min)距离，该距离主要用于测量两个点集之间的匹配程度，常常被应用于二值图像或轮廓的匹配技术之中。给定两个有限点集$P=(p_1,p_2,...,p_m)$,$Q=(q_1,q_2,...,q_n)$,则P和Q之间的Hausdorff距离定义为：
$$D(P,Q)=max\{d(P,Q),d(Q,P)\}$$
式中$d(P,Q)$为点集P到点集Q的有向Hausdorff距离，d(Q,P)可作类推。
$$\begin{gathered} d(P,Q)=\underset{p\in P}{\max }\underset{q\in Q}{\min }||p-q|| \\ d(Q,P)=\underset{q\in Q}{\max }\underset{p\in P}{\min }||q-p|| \end{gathered}$$
上式的$||\cdot ||$表示定义在集合上的一种距离范数。

​