![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
数学
Backcanhave7
学无止境,学以致用。
展开
-
向量范数及正则化方法简介
向量范数在G.H.Golub和C.F.Van_Loan所著的《矩阵计算》一书中,对向量范数的定义如下:正则化在机器学习中,正则化主要用于解决在训练模型的过程中出现的过拟合问题。常见的正则化方法有两种,即L1正则化和L2正则化。其中L1正则化除了可以抑制过拟合现象,还兼有特征选择和增加模型可解释性的作用;L2正则化除了可以抑制过拟合现象,在某些情况下还同时有助于后续的优化计算。L1正...原创 2019-01-16 20:21:19 · 4437 阅读 · 0 评论 -
常见概率抽样方法及其适用场景总结
抽样一般分为概率抽样和非概率抽样两大类,本文主要讨论概率抽样。所谓概率抽样,是指按照一定的概率从构成总体的所有单元中随机选择一部分单元进入样本的抽样方法。下面主要介绍简单随机抽样 、分层抽样 、整群抽样 、系统抽样 以及多级抽样这五种概率抽样方法。简单随机抽样 简单随机抽样(simple random sampling ,SRS)是最简单的概率抽样方 法 ,也是其他抽样方法的...原创 2019-01-22 15:59:01 · 18564 阅读 · 0 评论 -
对数坐标系与半对数坐标系
什么是对数坐标系?这个问题中的关键词是对数,只要理解了对数坐标系中的对数指的是什么意思,我们就能明白什么是对数坐标系。对数定义:如果a的x次方等于N,那么数x叫做以a为底N的对数,记作x=logaN。其中,a叫做底数,N叫做真数,x叫做对数。而对数坐标系中的对数指的是坐标轴上的刻度与原点的距离是用对数表示的,比如,对于以10为底数的对数坐标轴来说,如果某个刻度上标出的值为10(真数),...原创 2019-02-17 00:20:32 · 33552 阅读 · 0 评论 -
Python实现坐标上升算法
场景:已知f(x1,x2)=-x1^2-3*x2^2+2*x1*x2+6,求当f(x1,x2)取得最大值时,x1和x2的值分别是多少?f(x1,x2)对x1的偏导:f_x1=-2*x1+2*x2,令f_x1=0,=》x1=x2;f(x1,x2)对x2的偏导:f_x2=-6*x2+2*x1,令f_x2=0,=》x2=1/3*x1。在坐标上升的过程中,当每次沿着某个坐标轴寻找多元函数f的最...原创 2019-03-03 23:37:15 · 649 阅读 · 0 评论 -
从条件概率到贝叶斯公式
在实际生活中,有时需要考虑在已知一个事件发生的条件下,另外一个事件发生的概率,这个概率即条件概率。本文将从条件概率出发,引出概率论与数理统计中非常重要的两个公式:全概率公式和贝叶斯公式。首先,我们来看下什么是条件概率?定义:设A、B是两个事件,且P(B)>0,则称比值为在事件B已经发生的条件下,事件A发生的条件概率,记作P(A|B),即。如何理解这个条件概率的公式呢?...原创 2019-07-15 00:04:26 · 19502 阅读 · 3 评论