第6章 支持向量机
6.1 间隔与支持向量
支持向量机: 从几何角度,对于线性可分数据集,支持向量机就是找距离正负样本都最远的超平面, 相比于感知机,其解是唯一的,且不偏不倚,泛化性能更好。
n维空间的超平面(
x
+
b = 0 ,其中w
,
x
∈
):
1.超平面方程不唯一
2.法向量 和位移项 确定一个唯一超平面
3.法向量 垂直于超平面(缩放 时,若缩放倍数为负数会改变法向量方向)
4.法向量 指向的那一半空间为正空间,另一半为负空间
5.任意点 到超平面的距离公式为
对于给定的数据集 X和超平面x + b = 0 ,定义数据集 X 中的任意一个样本点(xi, yi), yi ∈ {−1, 1},i = 1, 2, ..., m 关于超平面的几何间隔为