证据理论：真相永远只有一个！

导读

本教程主要参考来自B站的【人工智能教程】5.4 - 证据理论视频，在这之上还加入了其他的博客、论文以及针对个人研究方向的见解。

侦探剧？不，是统计学！

证据理论，英文全拼其实不重要，反正也很少人说。他还有个别称，叫做“DS证据理论”。这个名称在各种论文中出现的频率非常的高。如果中文词汇显得不够高端，那就加入英文，或者干脆就用英文（笑）

那么，为什么说这个是统计学？

我们先来假设这样一个场景：

有一天，你带着你的小猫娘上街去玩。本来走着好好的，突然小猫娘在一家冰淇淋车面前停下来了。你看着她那期待的眼神和流口水的小嘴巴，实在不忍心拉着她快速离开，于是你顺着她的眼神瞟过去，发现了很大一张菜单，不仅有不知所云的名字，还有非常诱人的效果图。菜单上有三样：仰望星空、蓝海默默和冰の爱恋。

好嘛，买嘛。那么她看中的是哪一个呢？名字完全不知所云，估计直接问也不会有结果。那就猜吧！于是，你的脑海中有这么些个结果：（结果以集合形式呈现）

• {仰望星空}
• {蓝海默默}
• {冰の爱恋}
• {仰望星空，蓝海默默}
• {仰望星空，冰の爱恋}
• {蓝海默默，冰の爱恋}
• {仰望星空，蓝海默默，冰の爱恋}
• {不想吃，被五颜六色的图片吸引了}

嗯……接下来就是该选什么了。你作为她的主人，多少还是了解她的喜好的。于是你又开始对每个选项赋予一定的概率（胡乱设定的）：

• {仰望星空} - 25%
• {蓝海默默} - 20%
• {冰の爱恋} - 15%
• {仰望星空，蓝海默默} - 18%
• {仰望星空，冰の爱恋} - 13%
• {蓝海默默，冰の爱恋} - 8%
• {仰望星空，蓝海默默，冰の爱恋} - 1%
• {不想吃，被五颜六色的图片吸引了} - 0%

你知道，小猫娘对很神秘的名字是没有任何抵抗力的。所以你觉得“仰望星空”应该是分数最高的；另外，小猫娘还吃不完两个冰淇淋，所以不太可能买两个。难道是今天突然懂事了想给你也买一个？三个那就更离谱了，不想吃是绝对不可能的……呜哇，口水都滴到地上了啊……

怎么办，好像“仰望星空”这一款是最有希望的。算了，点了。你的小猫看起来很开心。

背后的统计学原理

那么我们来分析一下，我们这么选的真正原因。

小猫娘看到了三个冰淇淋，那就是三个选项。对于这三个选项，我们能够生成一共$2^3=8$种子集，分别是空集$1$个、单元素集合$3$个、双元素集合$3$个、三元素集合$1$个。

为了方便说明，我们记这$8$个选项为$\Omega$，每一个选项都有一个概率值，我们可以将这个选项和概率之间的关系称作一种“映射”，也就是将它视为函数：$p_i=f(x_i)\in (0,1),x_i\in \Omega$。这个可以说是根据周边什么信息推理出来的或主观或客观的评价概率。在冰淇淋这个情境中，你心中的$8$个选项对应的概率值就是你的主观考虑，如果说是像娃娃机一样设定好的概率那就是客观的了。当然，这个概率不是说我们想怎么定义就怎么定义的，而是遵循这些条件：

$$\{\begin{array}{ccccc}f(\varphi )& =& 0& \cdots & ❶\\ {\sum }_{x_i\in \Omega }f(x_i)& =& 1& \cdots & ❷\end{array}$$

其实总接下来就是两项：

• 空集无概率
• 其余和为$1$

如果同时满足这两个条件，$f(x)$才能够被称作概率分配函数，因为恰好完全分配了。

当然，我们这里的$x$实际上表示一个对象，也就是说，$x$包含了这个对象所有的条件集。有时候我们也写为矩阵形式${\sum }_{A\subseteq \Omega }f(A)=1$。而其中的$f(A)$也就是当前环境下对假设集$A$的信任程度。也就是你认为$A$中的条件是不是真的能够成立，成立的概率应该是多少。

证据成立概率的上限和下限

到这里，相信大家应该对DS理论有一定的了解了。那么接下来就是纯数学了。

我们刚刚提到$x\in \Omega$，其中如果还加上一个条件：$x$的取值相互独立，那么$\Omega$的所有子集就可以称作幂集，记为$2^{\Omega }$。也就是像给小猫娘麦冰淇淋一样，只能是$8$种相互独立的可能；而如果说是两只双胞胎猫娘，姐姐选了之后妹妹选同样的冰淇淋概率非常高，这就是对另一种可能产生了影响，也就不相互独立。

如果说，$A$代表单元素集合，那么$f(A)$就是对于假设条件$A$的精确信任度；如果$A$代表多元素集合，$f(A)$则仅代表整体信任度，每个假设条件的信任度并不精确，若$A=\Omega$也是同样的。对于这一点，我们用数学语言表示就是：

$$对于任意的A\subseteq \Omega ，记B\subseteq A，有Bel(A)=\sum _{B\subseteq A}f(B)$$

听起来绕口？无所谓啦。总之这句话的意思就是：当$A$为多元素集合的时候，记$Bel(A)$为$A$中所有子集的精确信任度之和。这个$Bel(A)$也可以称作下限函数。

除了这些，还有似然函数，同样是在集合$A$是幂集的前提下，具体表示为：

$$对于\forall A\subseteq \Omega ，s.t.\to Pl(A)=1-Bel(\bar{A})$$

其中，

$$\bar{A}=\Omega -A$$

也就是取反。

可以看到，这里多了一个取反的操作，所以这里讨论的也就不是集合$A$的精确信任度，而是$A$的非假信任度。同样的，相对于被称为下限函数的$Bel(A)$，$Pl(A)$也就被称为上限函数或者不可驳斥函数。听起来很让人摸不着头脑不是么？明明都有了真实的精确信任度，偏偏还要弄个非假的信任度，这不是折腾？

只能说，这是另一种求法，可以用在完全没有办法或者说靠人计算实在太麻烦的情况下。比如，你想带着你家里的所有猫娘出去逛街，但是每只猫娘的性格都不太一样，所以需要确定一个地点至少有一只猫娘愿意去。估计算到一半你就觉得太难了。所以改变思路：没有猫娘愿意去。听起来很不错？但是，还是有一个小小的弊端。因为我们用这个方法求出来的是非假信任度，也就是肯定为真的部分加上只能保证不假的部分的和。虽然绝对可以保证不是假的，但是有多少能确定是真的呢？如果精确部分很难算的话，这就真的一点都不知道了，完全决定不了该带猫娘们去哪。

上限和下限的数学关系

那么上下限和现实感觉有什么联系？只能这么说：当上限$Pl(A)=1$，下限$Bel(A)=0$的时候，我们就会在现实生活中觉得：我们对这件事一无所知，因为任何事发生的概率都是$[0,1]$。

那么上限和下限有什么关系吗？从数学上来说，有的。信任函数和似然函数有以下几点性质：

$$\{\begin{array}{ccccc}Bel(\varphi )& =& Pl(\varphi )& =& 0\\ Bel(\Omega )& =& Pl(\Omega )& =& 1\end{array}$$

$$若有A\subseteq B，则有\{\begin{array}{ccc}Bel(A)& \le & Bel(B)\\ Pl(A)& \le & Pl(B)\end{array}$$

$$对于\forall A\subseteq \Omega ，s.t.：\{\begin{array}{ccc}Pl(A)& \ge & Bel(A)\\ Pl(A)+Pl(\bar{A})& \ge & 1\\ Bel(A)+Bel(\bar{A})& \le & 1\end{array}$$

证据组合

单个证据基本上就是以上这些内容了。接下来难度升级：多个证据组合讨论。

对于两个不同的概率分配函数$f(x)$和$g(x)$，正交和$h(x)=f(x)⨁g(x)$满足：

$$\{\begin{array}{ccccc}h(\varphi )& =& 0& & \\ h(A)& =& \frac{{\sum }_{x\cap y=A}f(x)\times g(y)}{1-{\sum }_{x\cap y=\varphi }f(x)\times g(y)}& =& \frac{{\sum }_{x\cap y=A}f(x)\times g(y)}{{\sum }_{x\cap y\ne \varphi }f(x)\times g(x)}\end{array}$$

看起来头大？只能死记硬背了。我们唯一能做的就是把$h(A)$的分母提取出来：

$$K=1-\sum _{x\cap y=\varphi }f(x)\times g(y)=\sum _{x\cap y\ne \varphi }f(x)\times g(x)$$

对于这个$K$，我们可以说：

$$\{\begin{array}{ccccc}if& K& \ne & 0，then：& 正交和h(x)也是概率分布函数\\ if& K& =& 0，then：& h(x)不存在，f(x)与g(x)矛盾\end{array}$$

这个在多个条件下的混合判定更有用。

拿视频中的例子说明吧。你现在正流鼻涕，眼睛还有点点红。于是你问了你的医生朋友，说道：

• 如果流鼻涕，九成会是感冒但不是过敏性鼻炎；
• 如果眼睛红了，八成会是过敏性鼻炎而不是感冒。

这就是规则。那么你的情况就是这样的，也就是样本空间：

• {没病} - 也就是我们所说的空集$\varphi$
• {感冒}
• {过敏性鼻炎}
• {又是感冒又是过敏性鼻炎}

于是，你将每一块都拉出来分析，最终发现你就是感冒，不是过敏性鼻炎。

证据理论在电网中的应用

说了这么多，就该说说实际中的应用了吧。

说白了，证据理论依然是使用非常多的机器学习算法对海量的用户数据进行分析，并作出分类与预测这两个动作，本质上依然是一种机器学习。

实际中，我们可以使用证据理论预判哪条路在什么时候容易堵车、哪些设备在经过怎么样的使用之后会在什么时候损毁，甚至还能够进行心理预测、军事战场动向、信息安全主动防御等等。如果你曾经看过我的态势感知，你会发现这些应用方向和态势感知的内容重复率相当高。实际上态势感知只是一个方向，而DS理论则是一个相对比较实际的方法来感知事物的态势，而DS理论的核心就是大量的统计数据，无论是报表、日志还是报障记录，拿到之后便是常规的数据提取和统一格式、降维降噪建模演算、使用刚刚测到的假设条件演算预测结果。

那么在电网中呢？我们可以使用证据理论来预判在什么季节哪个小区的用电非常高、哪个片区的故障概率非常高、停电之后最有可能是哪个片区发生了故障等等。在发生停电之前，我们就能够使用证据理论挖掘出来的预测信息来给用户发送预警，防止用户在洗热水澡、写文档、电压力锅煲羊肉汤的时候突然断电。当然，在信息推送的时候还是要保证概率下限都足够高的时候才推送，否则很多误报就会像狼来了一样，让用户丧失信心。

是不是有点能理解了呢？