- 博客(6)
- 收藏
- 关注
RSS订阅原创 【数学基础】 线性代数以及符号编总
1基本概念和符号线性代数可以对一组线性方程进行简洁地表示和运算。例如，对于这个方程组:这里有两个方程和两个变量，如果你学过高中代数的话，你肯定知道，可以为x1 和x2找到一组唯一的解 (除非方程可以进一步简化，例如，如果第二个方程只是第一个方程的倍数形式。但是显然上面的例子不可简化，是有唯一解的)。在矩阵表达中，我们可以简洁的写作:其中：很快我们将会看到，咱们把方程表示...
2019-05-24 20:36:01
45459
3
转载 加速神经网络训练 (机器学习)
包括以下几种模式:Stochastic Gradient Descent (SGD) Momentum AdaGrad RMSProp Adam越复杂的神经网络 , 越多的数据 , 我们需要在训练神经网络的过程上花费的时间也就越多. 原因很简单, 就是因为计算量太大了. 可是往往有时候为了解决复杂的问题, 复杂的结构和大数据又是不能避免的, 所以我们需要寻找一些方法, 让神经...
2019-05-20 20:13:00
291
原创 【Pandas】DataFrame 速查
基本操作>1.查看前5个值和后三个值>df2.head()>df2.tail(3)>2.查看列名，值，以及索引>df2.columns>df2.values>df2.index>3.查看统计数据>df2.describe()>4.转置操作>df2.T>5.通过标签查询>df2['ag...
2019-05-20 01:00:22
362
原创 信息熵常见定义
信息论（Information Theory）是概率论与数理统计的一个分枝。用于信息处理、信息熵、通信系统、数据传输、率失真理论、密码学、信噪比、数据压缩和相关课题。本文主要罗列一些基于熵的概念及其意义，注意本文罗列的所有loglog都是以 2 为底的。信息熵在物理界中熵是描述事物无序性的参数，熵越大则越混乱。类似的在信息论中熵表示随机变量的不确定程度，给定随机变量 X ，其取值x1...
2019-05-14 21:57:04
2102
原创 KKT条件
对于含有不等式约束的优化问题，如何求取最优值呢？常用的方法是KKT条件，同样地，把所有的不等式约束、等式约束和目标函数全部写为一个式子L(a, b, x)= f(x) + a*g(x)+b*h(x)，KKT条件是说最优值必须满足以下条件：1. L(a, b, x)对x求导为零；2. h(x) =0;3. a*g(x) = 0;求取这三个等式之后就能得到候选最优值。其中第三个式子非常...
2019-05-06 01:22:18
515
转载 SMO算法
SMO算法由Microsoft Research的John C. Platt在1998年提出，并成为最快的二次规划优化算法，特别针对线性SVM和数据稀疏时性能更优。关于SMO最好的资料就是他本人写的《Sequential Minimal Optimization A Fast Algorithm for Training Support Vector Machines》了。我拜读了一下，下面先...
2019-05-05 23:35:49
3064
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人