![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
数学知识
大胜归来19
路漫漫其修远兮,吾将上下而求索
展开
-
先验概率、似然函数、后验概率、贝叶斯公式
这个文章的目的是为了加强对这几个概念的理解与记忆。怕自己不知道什么时候又忘了。看自己写的东西总应该好理解记忆一些吧。联合概率的乘法公式:(当随机变量x,y独立,则)这太简单了是吧。。。。联合概率公式变个形,得到条件概率公式为:,全概率公式:,其中可以这样理解把一个圆看成x,其中被划分为好多种情况,对每一种情况的概率求和就是全概率(整个概率)。(...转载 2019-03-08 22:08:18 · 476 阅读 · 0 评论 -
矩阵求导阶最小二乘法的推导
最小二乘法的目标:求误差的最小平方和。对应有两种模型:线性模型和非线性模型。如果矩阵是可逆的,线性模型最小二乘的解是closed-form(闭式解)即而非线性最小二乘没有closed-form(闭式解),通常用迭代法求解。其中有很多比较有名的迭代法,如梯度下降法(又分为批梯度下降、随机梯度下降)、牛顿法、拟牛顿法等,它们的应用条件更为广泛(无约束),都是通过迭代更新来逐步进行的参数优化方法...转载 2019-03-07 11:41:40 · 1723 阅读 · 0 评论 -
如何理解特征向量和特征值
一、什么是特征值和特征向量特征值和特征向量来自对矩阵的特征分解。矩阵本质上是线性变换,最开始是用来解线性方程组的。线性方程组不就可以看成是从变量X到Y的变换嘛。那什么是特征值呢?假设我们现在用矩阵A对坐标系进行线性变换,坐标系中变换前后方向不变的向量即是矩阵A的特征向量。最简单的例子,考虑将一个正方形木框挤压成一个菱形,两条对角线在挤压前后方向不变。对于一个长宽不等的矩形,沿着某一条...转载 2019-04-02 11:13:25 · 1778 阅读 · 0 评论 -
对矩阵求导
博客网址:https://blog.csdn.net/daaikuaichuan/article/details/80620518原创 2019-04-28 17:24:30 · 243 阅读 · 0 评论 -
K阶矩
1、原点矩定义:设一随机变量,若存在,则称为的阶原点矩,简称阶矩。(其中)(当阶数大于2时,称为高阶)2、中心距定义:设一随机变量,若存在,则称为的阶中心矩。(其中)可见,均值为随机变量的一阶原点矩,方差为随机变量的二阶中心矩。3、混合矩设和为随机变量,若存在,则称它为和的阶混合(原点)矩;若存在,则称它为和的阶混合中心矩。(其中)可见,协方差是和的二阶混合中心...原创 2019-01-21 15:52:00 · 8785 阅读 · 0 评论 -
高斯分布
维基百科上:https://zh.wikipedia.org/zh-cn/%E6%AD%A3%E6%80%81%E5%88%86%E5%B8%83#%E5%8B%95%E5%B7%AE%E6%88%96%E7%9F%A9%EF%BC%88-{moment}-%EF%BC%89转载 2019-01-21 16:46:06 · 230 阅读 · 0 评论