01-概率论

基本概念

小盒与球的例子

• 2个盒子：红盒子 x 1，蓝盒子 x 1
• 红盒子：苹果 x 2，橘子 x 6
• 蓝盒子：苹果 x 3，橘子 x 1
  

基本假设

• 过程：
  
  1. 随机挑选一个盒子
  2. 随机选一个水果
  3. 观察水果种类
  4. 放回
• 该动作重复多次
• 选红盒子概率：40%
• 选蓝盒子概率：60%
• 选择盒子中水果概率相等

形式化描述

随机变量

概念：随机变量(random variable)的本质是一个函数，是从样本空间的子集到实数的映射，将事件转换成一个数值。

对应例子解释

• 选择盒子的颜色是随机变量，记做B（Box），B有2个取值：r（red）和b（blue）
• 水果的选择也是随机变量，记做F（Fruit），F有2个取值：a（apple）和o（orange）

概率

概念：一个事件的概率定义为在总试验次数趋于无穷的情况下事件发生的次数与试验总数的比值。

• 概率定义范围是[0,1]
• 包含所有结果
• 事件之间互斥
• 概率和为1

对应例子解释

• 选红盒子概率40%记做：$p(B=r)=0.4$
• 选蓝盒子概率60%记做：$p(B=b)=0.6$

加法规则和乘法规则

一般形式推广

• 2个随机变量：$X$，$Y$
  
  • 对应到例子就是Box和Fruit
• 假设 $X$ 可以任意的取 $x_i$ ，其中 $i=1,...,m$
• 假设 $Y$ 可以任意的取 $y_j$ ，其中 $j=1,...,l$
• 做 $N$ 次同时对 $X$ 和 $Y$ 进行取样的实验，把结果为 $X=x_i,Y=y_j$ 的试验的数量记作 $n_ij$
• 把 $X$ 的结果是 $x_i$ (与 $Y$ 的取值无关)的试验的数量记作 $c_i$
• 把 $Y$ 的结果是 $y_i$ (与 $X$ 的取值无关)的试验的数量记作 $r_j$

联合概率

概念：联合概率(joint probability)表示2个事件共同发生的概率

对应图示的解释

$X$ 取 $x_i$ 且 $Y$ 取 $y_j$ 的概率被记作