python svm超参数_支持向量机超参数的可视化解释

作者|Soner Yıldırım 编译|VK 来源|Towards Datas Science

支持向量机(SVM)是一种应用广泛的有监督机器学习算法。它主要用于分类任务，但也适用于回归任务。

在这篇文章中，我们将深入探讨支持向量机的两个重要超参数C和gamma，并通过可视化解释它们的影响。所以我假设你对算法有一个基本的理解，并把重点放在这些超参数上。

支持向量机用一个决策边界来分离属于不同类别的数据点。在确定决策边界时，软间隔支持向量机(soft margin是指允许某些数据点被错误分类)试图解决一个优化问题，目标如下：

增加决策边界到类(或支持向量)的距离

使训练集中正确分类的点数最大化

显然，这两个目标之间有一个折衷，它是由C控制的，它为每一个错误分类的数据点增加一个惩罚。

如果C很小，对误分类点的惩罚很低，因此选择一个具有较大间隔的决策边界是以牺牲更多的错误分类为代价的。

当C值较大时，支持向量机会尽量减少误分类样本的数量，因为惩罚会导致决策边界具有较小的间隔。对于所有错误分类的例子，惩罚是不一样的。它与到决策边界的距离成