沉浮于世的博客

决策树是一种机器学习的方法。决策树的生成算法有ID3, C4.5和C5.0等。决策树是一种树形结构，其中每个内部节点表示一个属性上的判断，每个分支代表一个判断结果的输出，最后每个叶节点代表一种分类结果。

KNN可以说是最简单的分类算法之一，同时，它也是最常用的分类算法之一，注意KNN算法是有监督学习中的分类算法，它看起来和另一个机器学习算法Kmeans有点像（Kmeans是无监督学习算法），但却是有本质区别的。那么什么是KNN算法呢，接下来我们就来介绍介绍吧。

1、深度学习三次热潮 2、深度学习爆发的三要素 大数据、计算能力、算法 3、深度学习三巨头(三个代表人物) 此外，还有一个人也是很著名的，华裔科学家吴恩达： 他们之间的关系网： 4、单层感知器 4.1 人体神经网络 人工设计的神经元： 例如： 另外一种神经元结构： 4.2 感知器的学习规则 例如： 学习率的取值： 不同的学习率随着迭代次数的变化，loss值的变化： 模型...

直接使用梯度下降法去做逻辑回归，相当于完成底层实现。 直接调用sklearn的话，简单很多，具体实现无法学习到。 一、逻辑回归(Logistic Regression) 逻辑回归是用来处理分类问题的 Sigmoid/Logistic Function: 1、决策边界 case 1: case 2: case 3: 2、逻辑回归的代价函数 (1) 所以对于non-convex func来说，梯度下降法的代价函数并不适合这种问题求解，需要新...

回归：从一组数据出发，确定某些变量之间的定量关系式；即建立数学模型并估计未知参数。 回归的目的是预测数值型的目标值，它的目标是接受连续数据，寻找最适合数据的方程，并能够对特定值进行预测。这个方程称为回归方程，而求回归方程显然就是求该方程的回归系数，求这些回归系数的过程就是回归。

一、机器学习(ML) 人工智能的一个分支，让一个计算机程序针对某一特定任务，从经验中学习，并且越来越好。 二、深度学习(DL) 是机器学习算法中的一种算法，一种实现机器学习的技术和方法。 三、机器学习的类型，及详细解释 类型 说明 Supervised learning 训练集包含特征(x)和目标(y)，且目标人为标注【需要你提前告诉模型，你输入的特征是什么，目标是什么】，模型根据这个训练集学习出一个函数，当新的数据到来的时候，可以根据这个函数预测结果 Unsupe..