机器学习----数学----常见的函数及概率分布


\
\

常见函数求导公式:

在这里插入图片描述

泰勒展开式(Taylor):

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

sigmoid 函数

在这里插入图片描述
导数:
在这里插入图片描述

概率公式:

\

条件概率公式:

P ( A ∣ B ) = P ( A B ) P ( B ) P(A|B)= \Large \frac{P(AB)}{P(B)} P(AB)=P(B)P(AB)

全概率公式:

P ( A ) = ∑ i n P ( A ∣ B i ) P ( B i ) P(A)= \Large \sum_i^n P(A|B_i)P(B_i) P(A)=inP(ABi)P(Bi)

贝叶斯公式(Bayes):

P ( B i ∣ A ) = P ( A ∣ B i ) P ( B i ) ∑ j n P ( A ∣ B j ) P ( B j ) P(B_i|A)= \Large \frac {P(A|B_i)P(B_i) } { \sum_j^n P(A|B_j)P(B_j)} P(BiA)=jnP(ABj)P(Bj)P(ABi)P(Bi)
\

常见概率分布:

\

概率分布总结:

分布参数数学期望方差
正态分布 μ , σ > 0 \mu,\sigma >0 μ,σ>0 μ \mu μ σ 2 \sigma^2 σ2
二项分布 n ≥ 1 , 0 < p < 1 n\ge 1,0<p<1 n1,0<p<1 n p np np n p ( 1 − p ) np(1-p) np(1p)
泊松分布 λ > 0 \lambda >0 λ>0 λ \lambda λ λ \lambda λ
均匀分布 a < b a<b a<b ( a + b ) / 2 (a+b)/2 (a+b)/2 ( a + b ) 2 / 12 (a+b)^2/12 (a+b)2/12
指数分布 θ > 0 \theta >0 θ>0 θ \theta θ θ 2 \theta^2 θ2
两点分布 0 < p < 1 0<p<1 0<p<1 p p p p ( 1 − p ) p(1-p) p(1p)

1. 正态分布 X ∼ N ( μ , σ 2 ) X\sim N(\mu,\sigma^2) XN(μ,σ2)

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

2. 两点分布 X ∼ b ( 1 , p ) X\sim b(1,p) Xb(1,p)

在这里插入图片描述

3. 二项分布(0,1分布)\多重伯努利分布(Bernoulli distribution) X ∼ b ( n , p ) X\sim b(n,p) Xb(n,p):

在这里插入图片描述
下面化简中用了二项展开式 ( a + b ) n = ∑ r = 0 n C n r a n − r b r = n ! r ! ( n − r ) ! a n − r b r (a+b)^n=\sum_{r=0}^nC_n^ra^{n-r}b^r=\frac{n!}{r!(n-r)!}a^{n-r}b^r (a+b)n=r=0nCnranrbr=r!(nr)!n!anrbr
在这里插入图片描述
在这里插入图片描述

4. Possion 分布 X ∼ π ( λ ) X\sim \pi(\lambda) Xπ(λ)

Taylor 展开 ——> Possion 分布:

在这里插入图片描述
分布律:
在这里插入图片描述

在这里插入图片描述

5. 均匀分布 X ∼ U ( a , b ) X\sim U(a,b) XU(a,b)

在这里插入图片描述

6. 指数分布 X ∼ E ( λ ) X\sim E(\lambda) XE(λ)

在这里插入图片描述
[1] 详情可见《概率论与数理统计》,浙大版.

学习人工智能,机器学习都离不开数学基础和编程知识。无论你是数据科学的初学者还是已经从事人工智能开发的有经验人员,这门课都适合于你。为什么这么说?首先人工智能和机器学习本质上就是算法,而算法就是数学及统计学以及编程的结合。当前市场上有许多开源的软件包如SKLEARN确实可以帮助没经验的或缺乏数学或算法基础的人实现机器学习模型及预测,但这些工具无法使你真正懂得算法的本质或来源,或者无法使你在不同场合下灵活运用及改进算法。记住,在实际工作中找到适合应用场景的解决方案是最难但是最重要的。但这离不开数学基础和算法理解。比如,线性回归是一类普遍的机器学习算法,所有的机器学习软件都有现成的方法实现模型,但如果在训练数据中加入几条新数据,那么新建立的模型和原来的模型有和联系或不同?再比如,为什么深度神经网络中的Sigmoid函数一般只用到输出层?神经网络的向后传播理论如何与泰勒展开和复合函数的偏导数联系在一起?人工智能中推荐系统和文字向量如何与矩阵的奇异分解以及特征向量联系?模型中对标签进行数据变换如何影响预测值?所有这些问题的答案,你都可以从本课中找到线索。本课系统地讲述了有关人工智能,机器学习背后的数学知识。特别指出,微积分和代数知识是本课的核心。统计学基础被安排在另外的课程中。除此之外,我在每一章节或主要知识点后都安排了各类程序以解释和回顾所学到的东西。最后要提到的是,这不是一门工程项目实践课。但我会另外专门安排有关人工智能,机器学习的实践课程
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值