ydf_micro的博客

  决策树       决策树(decision tree)亦称“判定树”是一类常见的机器学习方法。以二分类任务为例，我们希望从给定训练集学得一个用以对新示例进行分类。比如根据书上的西瓜各种特征来最终得到这个瓜是不是好瓜。决策树的分类算法是基于实例的归纳学习算法。能从给定的一些完全无序的训练样本中，提炼出树形的分类模型。决策树的生成是一个递归的过程。树的非叶子节点记录了使用哪一个特征进行判断...

神经网络之反向传播算法     反向传播(BackPropagation)算法（也叫误差逆传播算法）适用于训练多层网络，学习BP算法告诉我们：   1、当我们改变权值和偏置的时候，损失函数的改变速度   2、如何改变权值和偏置以训练神经网络的整体表现   BP算法基于梯度下降策略，以目标的负方向梯度对参数进行调整。BP算法最关键的部分就是求梯度（某一函数在该点处的方向导数沿着该方向取得最...