支持向量机(SVM)之完全线性可分

1,前提条件:在所给数据集完全线性可分时才能应用此模型,属于较理论的情况,实际的数据不大可能完全分开。

2,待解决问题(二分类问题):

有线性可分数据集 T = { ( x 1 , y 1 ) , ( x 2 , y 2 ) , . . . , ( x N , y N ) } , 其 中 x i ∈ R n , y i ∈ { − 1 , 1 } , i = 1 , 2 , . . . , N T=\{(x_1,y_1),(x_2,y_2),...,(x_N,y_N)\},其中x_i\in R^n,y_i \in \{-1,1\},i=1,2,...,N T={(x1,y1),(x2,y2),...,(xN,yN)},xiRnyi{1,1}i=1,2,...,N
要求找到最大间隔超平面将数据集分为两类。
。。。
略有所思:最大间隔有两个方式理解,一个是一个板(超平面)离所有点的距离最大,如下图:
在这里插入图片描述
二个是想象两类边上各有一个板,这两板平行,要使它们间的距离最大,如下图:
在这里插入图片描述
。。。

3,将上述问题转化为约束最优化问题

在这里插入图片描述

4,解上述问题的对偶问题

在这里插入图片描述
在这里插入图片描述

5,最大间隔超平面的通用求法

在这里插入图片描述

S1 最大间隔超平面的存在性和唯一性论证

在这里插入图片描述
在这里插入图片描述

Reference

《统计学习方法》李航

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值