概率统计相关基础知识

概率编辑[gài lǜ] 

概率，又称或然率、机会率、机率或可能性，是 概率论的基本概念。概率是对 随机事件发生的可能性的度量，一般以一个在0到1之间的 实数表示一个事件发生的可能性大小。越接近1，该事件更可能发生；越接近0，则该事件更不可能发生。人们常说某人有百分之多少的把握能通过这次考试，某件事发生的可能性是多少，这都是概率的实例。

1

历史编辑

第一个系统地推算概率的人是 16世纪的 卡尔达诺。记载在他的著作《Liber de Ludo Aleae》中。书中关于概率的内容是由Gould从拉丁文翻译出来的。

卡尔达诺的数学著作中有很多给赌徒的建议。这些建议都写成短文。例如：《谁，在什么时候，应该赌博？》、《为什么亚里斯多德谴责赌博？》、《那些教别人赌博的人是否也擅长赌博呢？》等。

然而，首次提出系统研究概率的是在 帕斯卡和 费马来往的一系列信件中。这些通信最初是由帕斯卡提出的，他想找费马请教几个关于由Chevvalier de Mere提出的问题。Chevvalier de Mere是一知名作家， 路易十四宫廷的显要，也是一名狂热的赌徒。问题主要是两个：掷骰子问题和比赛奖金分配问题。

2定义编辑

频率定义

随着人们遇到问题的复杂程度的增加，等可能性逐渐暴露出它的弱点，特别是对于同一 事件，可以从不同的等可能性角度算出不同的概率，从而产生了种种悖论。另一方面，随着经验的积累，人们逐渐认识到，在做大量重复试验时，随着试验次数的增加，一个事件出现的 频率，总在一个固定数的附近摆动，显示一定的稳定性。R.von 米泽斯把这个固定数定义为该事件的概率，这就是概率的频率定义。从理论上讲，概率的频率定义是不够严谨的。

公理化定义

柯尔莫哥洛夫于1933年给出了概率的公理化定义，如下：

设E是随机试验，Ω是它的 样本空间。对于E的每一事件A赋于一个 实数，记为P(A)，称为事件A的概率。这里P(·)是一个 集合 函数，P(·)要满足下列条件：

（1）非负性：对于每一个事件A，有P(A)≥0;

（2） 规范性：对于 必然事件S，有P(S)=1;

（3）可列可加性：设A1，A2……是两两互不相容的事件，即对于i≠j，Ai∩Aj=φ，（i,j=1,2……），则有P（A1∪A2∪……）=P（A1）+P（A2）+……

随机事件的发生与否是带有偶然性的，但是随机事件发生的可能性还是有大小之别的，是可以度量的。实际上在生活、生产和经济活动中，人们常关心一个随机事件发生的可能性大小。

例如：

（1）抛一枚均匀的硬币，出现正面与方面的可能性各为1/2。

（2）购买彩票的中奖机会有多少呢？

上述正面出现的机会，以及彩票中奖的机会或者命中率都是用来度量随机事件发生可能性大小。一个随机事件A发生可能性的大小称为这个事件的概率，并用P（A）表示。

统计定义

在一定条件下，重复做n次试验，n _A为n次试验中事件A发生的次数，如果随着n逐渐增大，频率n _A/n逐渐稳定在某一数值p附近，则数值p称为事件A在该条件下发生的概率，记做P(A)=p。这个定义成为概率的统计定义。

在历史上，第一个对“当试验次数n逐渐增大，频率nA稳定在其概率p上”这一论断给以严格的意义和数学证明的是 雅各布·伯努利（Jacob Bernoulli）。

从概率的统计定义可以看到，数值p就是在该条件下刻画事件A发生可能性大小的一个 数量指标。

由于频率n _A/n总是介于0和1之间，从概率的统计定义可知，对任意事件A，皆有0≤P(A)≤1，P(Ω)=1，P(Φ)=0。其中Ω、Φ分别表示 必然事件（在一定条件下必然发生的事件）和 不可能事件（在一定条件下必然不发生的事件）。

古典定义

如果一个试验满足两条：

（1）试验只有有限个基本结果；

（2）试验的每个基本结果出现的可能性是一样的。

这样的试验便是古典试验。

对于古典试验中的事件A，它的概率定义为：P(A)=m/n，其中n表示该试验中所有可能出现的基本结果的总数目。m表示事件A 包含的试验基本结果数。 [1]  这种定义概率的方法称为概率的古典定义。 [2]  

3必然事件与不可能事件编辑

在一个特定的随机试验中，称每一可能出现的结果为一个 基本事件 ，全体基本事件的集合称为 基本空间 。随机事件（简称事件）是由某些基本事件组成的，例如，在连续掷两次骰子的随机试验中，用Z，Y分别表示第一次和第二次出现的点数，Z和Y可以取值1、2、3、4、5、6，每一点（Z，Y）表示一个基本事件，因而基本空间包含36个元素。“点数之和为2”是一事件，它是由一个基本事件（1，1）组成，可用集合{（1，1）}表示，“点数之和为4”也是一事件，它由（1，3），（2，2），（3，1)3个基本事件组成，可用集合{（1，3），(3，1)，（2，2)}表示。如果把“点数之和为1”也看成事件，则它是一个不包含任何基本事件的事件，称为不可能事件。在试验中此事件不可能发生。如果把“点数之和小于40”看成一事件，它包含所有基本事件，在试验中此事件一定发生，所以称为必然事件。若A是一事件，则“事件A不发生”也是一个事件，称为事件A的 对立事件 。实际生活中需要对各种各样的事件及其相互关系、基本空间中元素所组成的各种 子集 及其相互关系等进行研究

举个例子：小明要在4个抽屉中放入5个球，其中有一个抽屉会有2个球，这就是必然事件

再举个例子：小明要在5个抽屉中放入3个球，如果说其中每个抽屉都有球，那么，这就是不可能事件

【随机事件，基本事件，等可能事件， 互斥事件，对立事件】

在一定的条件下可能发生也可能不发生的事件，叫做随机事件。

一次实验连同其中可能出现的每一个结果称为一个基本事件。

通常一次实验中的某一事件由基本事件组成。如果一次实验中可能出现的结果有n个，即此实验由n个基本事件组成，而且所有结果出现的可能性都相等，那么这种事件就叫做等可能事件。

不可能同时发生的两个事件叫做互斥事件。

必有一个发生的互斥事件叫做对立事件。

即P（必然事件）=1

P（可能事件）=(0-1)（可以用 分数）

P（不可能事件）=0

4两大类别编辑

古典概率

古典概率讨论的对象局限于 随机试验所有可能结果为有限个等可能的情形，即基本空间由有限个 元素或 基本事件组成，其个数记为n，每个基本事件发生的可能性是相同的。若事件A包含m个 基本事件，则定义事件A发生的概率为p（A）=m/n，也就是事件A发生的概率等于事件A所包含的基本事件个数除以基本空间的基本事件的总个数，这是P.-S. 拉普拉斯的古典概率定义，或称之为概率的古典定义。历史上 古典概率是由研究诸如 掷骰子一类赌博游戏中的问题引起的。计算古典概率，可以用 穷举法列出所有基本事件，再数清一个事件所含的基本事件个数相除，即借助组合计算可以简化计算过程。

几何概率

几何概率若随机试验中的基本事件有无穷多个，且每个 基本事件发生是等可能的，这时就不能使用 古典概率，于是产生了几何概率。几何概率的基本思想是把事件与几何区域对应，利用几何区域的度量来计算事件发生的概率， 布丰投针问题是应用几何概率的一个典型例子。

在 概率论发展的早期，人们就注意到古典概率仅考虑试验结果只有有限个的情况是不够的，还必须考虑试验结果是无限个的情况。为此可把无限个试验结果用欧式空间的某一区域S表示，其试验结果具有所谓“均匀分布”的性质，关于“均匀分布”的精确定义类似于古典概率中“等可能”只一概念。假设区域S以及其中任何可能出现的小区域A都是可以度量的，其度量的大小分别用μ(S)和μ(A)表示。如 一维空间的长度， 二维空间的 面积， 三维空间的 体积等。并且假定这种度量具有如长度一样的各种性质，如度量的非负性、可加性等。

• 几何概率的严格定义

设某一事件A（也是S中的某一区域），S包含A，它的量度大小为μ(A)，若以P(A)表示事件A发生的概率，考虑到“均匀分布”性，事件A发生的概率取为：P(A)=μ(A)/μ(S)，这样计算的概率称为 几何概率。

若Φ是不可能事件，即Φ为Ω中的空的区域，其量度大小为0，故其概率P(Φ)=0。

5性质编辑

性质1．P(Φ)=0.

性质2．（有限可加性）．当n个事件A ₁,…,A _n两两互不相容时：　P(A ₁∪...∪A _n)=P(A ₁)+...+P(A _n)．

性质3．对于任意一个事件A：P(A)=1-P(非A)．

性质4．当事件A,B满足A包含于B时：P(B-A)=P(B)-P(A)，P(A)≤P(B)．

性质5．对于任意一个事件A，P(A)≤1．

性质6．对任意两个事件A和B，P(B-A)=P(B)-P(AB)．

性质7．（加法公式）．对任意两个事件A和B，P(A∪B)=P(A)+P(B)-P(A∩B)．

6频率与概率编辑

对事件发生可能性大小的量化引入“概率”．

“ 统计规律性”

独立重复试验总次数n,事件A发生的频数μ，

事件A发生的频率Fn(A)=μ/n,A的频率Fn(A)有没有稳定值？

如前人做过的掷硬币的试验(P.44下面表)

如果有就称频率μn的稳定值p为事件A发生的概率记作P(A)=p[概率的统计定义]

P(A)是客观的，而Fn(A)是依赖经验的。

统计中有时也用n很大的时候的Fn(A)值当概率的近似值。

7加法法则编辑

如事件A与B不相容，A+B发生的时候，A与B两者之中必定而且只能发生其中之一。独立重复地做n次实验，如记事件A发生的 频数为μA、频率为Fn(A) ，记事件B发生的频数为μB 、频率为Fn(B) ，事件A+B发生的频数为μA+B 、频率为Fn(A+B) ，易知：μA+B =μA +μB，∴Fn(A+B) = Fn(A) + Fn(B) ,它们的稳定值也应有：P(A+B)=P(A)+P(B)[加法法则]如事件A与B不相容，即如果AB=φ，则 P(A+B)=P(A)+P(B)即：两个互斥事件的和的概率等于它们的概率之和。请想一下：如A与B不是不相容，即相容的时候呢？进一步的研究得：P(A+B)=P(A)+P(B)-P(AB)这被人称为：“多退少补”。 [3]  

8概率 - 模糊和概率编辑

1. 是否不确定性就是随机性？ 似然比、概率是否代表了所有的不确定性？
   　　Bayesian camp：概率是一种主观的先验知识，不是一种频率和客观测量值
   　　Lindley：概率是对不确定性唯一有效并充分的描述，所有其他方法都是不充分的
   　　相似：通过单位间隔[0,1]间的数来表述不确定性，都兼有集合、相关、联系、分布方面的命题
   　　区别：对待。经典集合论，
   　　代表概率上不可能的事件。而模糊建立在
   　　（1）是否总是成立的？
   　　考虑能否逻辑上或部分地违背“无矛盾定理”（Aristotle的三个‘思考定理’之一，同时排中定理同一性定理这些都是非黑即白的经典定理。）模糊（矛盾）的产生，就是西方逻辑的结束
   　　（2）是否可以推导条件概率算子？
   　　经典集合论中：
   　　模糊理论：考虑超集是其子集的子集性程度，这是模糊集合的特有问题。
2. 模糊和概率：是否与多少
   　　模糊是事件发生的程度。随机是事件是否发生的不确定性。
   　　例子：明天有20%的几率下小雨（包含复合的不确定性）
   　　停车位问题
   　　一个苹果在冰箱里的概率和半个苹果在冰箱里
   　　事件倒转，地球演变恢复原点
   　　模糊是一种确定的不定性（deterministic uncertainty），是物理现象的特性。用模糊代表不确定性的结果将是震撼的，人们需要重新审视现实模型。