机器学习
nullpo_
咸鱼初上路
展开
-
《统计学习方法》学习笔记 chapater2——感知机
感知机简介模型策略算法原始形式对偶形式简介感知机(perceptron)是二分类的线性分类模型,简单理解为一个超平面把两个类别的数据切成两半。它是SVM、神经网络的基础,相当于加减乘除,所以必须学一下,最好理解透彻。按照统计学习方法三要素来学习:模型、策略、算法。模型定义比较冗长,自己去看,只说核心点,模型函数:f(x)=sign(wT⋅x+b)f(x)=sign(w^T \cdot x+b)f(x)=sign(wT⋅x+b)其中www是权值向量,bbb是偏置。用人话来说,wTx+bw原创 2020-05-22 15:12:54 · 421 阅读 · 0 评论 -
《统计学习方法》学习笔记 Chapater 1 —— 统计学习方法三要素
统计学习方法三要素I. 模型II. 策略III. 算法之前在学的时候,看到李航的书一直强调统计学习方法三要素:模型、策略、算法,模模糊糊的,看了好几遍才明白,记录一下。I. 模型简单一点理解就是选择决策模型和概率模型,二选一。决策模型主要是要拿到决策函数Y=f(X)Y=f(X)Y=f(X),概率模型主要是拿到条件概率分布P(Y∣X)P(Y|X)P(Y∣X)。至于二者有啥区别,自行百度。II. 策略简单理解为损失函数(loss function)即可,风险函数是个啥,没闹明白。损失函数常用的原创 2020-05-21 19:48:26 · 219 阅读 · 0 评论