CV求职面经 -- 数学基础

全网东拼西凑的笔记文章罢了

目录

微积分

微分

导数

上确界、下确界

Lipschitz连续性(GAN)

梯度

偏导数

链式求导法则

导数与函数的极值&单调性&凹凸性判断

不定积分

定积分

泰勒公式(优化算法的核心)

线性代数与矩阵论

线性空间

标量、向量、矩阵、张量

范数

矩阵和向量的基本运算方式

特征值、特征向量

矩阵的正定、正定矩阵

特征值分解(主成分分析和线性判别分析等)

奇异值分解(正太贝叶斯分类器及主题模型等)

矩阵分解

线性变换

相似矩阵

欧氏空间

正交矩阵

对称矩阵

概率论与信息论

随机变量

概率分布

条件概率

统计与假设检验

概率密度函数(连续)、概率质量函数(离散)

贝叶斯公式

期望

方差

协方差

0-1分布、二项分布(伯努利分布)、几何分布、高斯分布、指数分布、泊松分布

最小二乘法

最大似然估计

指数移动平均

熵的概念

条件熵

联合熵

相对熵

最大熵

互信息

最优化方法

基本概念

决策变量、目标函数、约束条件

凸集

凸函数

凸集分离定理

超平面、半空间

梯度下降法

拟牛顿法、阻尼牛顿法

随机梯度下降算法


微积分

微分

微分_百度百科

       几何意义:设 Δx 是曲线 y=f(x) 上的点 M 在横坐标上的增量,Δy 是曲线在点 M 对应 Δx 在纵坐标上的增量,dy 是曲线在点 M 的切线对应 Δx 在纵坐标上的增量。当 |Δx| 很小时,|Δy - dy| 比 |Δx| 要小得多(高阶无穷小),因此在点 M 附近,我们可以用切线段来近似代替曲线段。

       设函数y = f(x)在x的邻域内有定义,x及x + Δx在此区间内。如果函数的增量Δy = f(x + Δx) - f(x)可表示为 Δy = AΔx + o(Δx)(其中A是不随Δx改变的常量,但A可以随x改变),而o(Δx)是比Δx高阶的无穷小(注:o读作奥密克戎,希腊字母)那么称函数f(x)在点x是可微的,且AΔx称作函数在点x相应于因变量增量Δy的微分,记作dy,即dy = AΔx。函数的微分是函数增量的主要部分,且是Δx的线性函数,故说函数的微分是函数增量的线性主部(△x→0)。

       通常把自变量x的增量 Δx称为自变量的微分,记作dx,即dx = Δx。于是函数y = f(x)的微分又可记作dy = f'(x)dx。函数因变量的微分与自变量的微分之商等于该函数的导数。因此,导数也叫做微商。

 

不懂手推即可

不懂手推即可

 

 不懂手推即可

不懂手推即可

 

导数

导数_百度百科

       导数(Derivative),也叫导函数值。又名微商,是微积分中的重要基础概念。当函数y=f(x)的自变量x在一点x0上产生一个增量Δx时,函数输出值的增量Δy与自变量增量Δx的比值在Δx趋于0时的极限a如果存在,a即为在x0处的导数,记作f'(x0)或df(x0)/dx。

       导数是函数的局部性质。一个函数在某一点的导数描述了这个函数在这一点附近的变化率。如果函数的自变量和取值都是实数的话,函数在某一点的导数就是该函数所代表的曲线在这一点上的切线斜率。导数的本质是通过极限的概念对函数进行局部的线性逼近。

       可导的函数一定连续;不连续的函数一定不可导。

导数的四则运算:

  • 常为零,幂降次

  • 对倒数e为底时直接倒数,a为底时乘以1/lna

  • 指不变特别的,自然对数的指数函数完全不变,一般的指数函数须乘以lna

  • 正变余,余变正

  • 切割方切函数是相应割函数(切函数的倒数)的平方

  • 割乘切,反分式

d/dx(sin x) = cos x

d/dx(cos x) = -sin x

d/dx(tan x) = sec^2 x

d/dx(e^x) = e^x

d/dx(e^u) = (e^u)(du/dx)

d/dx(ln x) = 1/x 

三角函数:

d/dx(sin x)=cos x

d/dx(cos x)=-sin x

d/dx(tan x)=sec^2 x

d/dx[sin(ax+b)]=a[cos(ax+b)]

d/dx[cos(ax+b)]=-a[sin(ax+b)]

d/dx[tan(ax+b)]=a[sec^2(ax+b)]

d/dx(sin^n x)=n[sin^(n-1) x](cos x)

d/dx(cos^n x)=-n[cos^(n-1) x](sin x)

自然指数函数:

d/dx(e^x)=e^x

d/dx(e^u)=(e^u)(du/dx)

d/dx[e^(ax+b)]=ae^(ax+b)

自然对数函数:

d/dx(ln x)=1/x

d/dx(ln u)=(1/u)(du/dx)

d/dx[ln (ax+b)]=a/(ax+b)

上确界、下确界

数列的上/下确界与上/下极限的区别和联系 - 知乎

上确界是最小的上界,下确界是最大的下界,这个概念将用来定义上极限和下极限。

上/下确界,数列最小的上界或最大下界。而上/下极限,则是强调当 n 趋近于 无穷时数列或者集合收敛子列的最大/最小的极限。

Lipschitz连续性(GAN)

Lipschitz连续_YZXnuaa的博客-CSDN博客_lipschitz连续

       Lipschitz连续性,是一类特殊的Holder连续性,主要用在微分方程解的存在性与唯一性的判断中

梯度

梯度(数学名词)_百度百科

       梯度的本意是一个向量(矢量),表示某一函数在该点处的方向导数沿着该方向取得最大值,即函数在该点处沿着该

  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值