一个简单的案例带你了解支持向量机算法（Python代码）

介绍

掌握机器学习算法并不是一个不可能完成的事情。大多数的初学者都是从学习回归开始的。是因为回归易于学习和使用，但这能够解决我们全部的问题吗？当然不行！因为，你要学习的机器学习算法不仅仅只有回归！

把机器学习算法想象成一个装有斧头，剑，刀，弓箭，匕首等等武器的军械库。你有各种各样的工具，但你应该学会在正确的时间和场合使用它们。作为一个类比，我们可以将“回归”想象成一把能够有效切割数据的剑，但它无法处理高度复杂的数据。相反，“支持向量机”就像一把锋利的刀—它适用于较小的数据集，但它可以再这些小的数据集上面构建更加强大的模型。

现在，我希望你现在已经掌握了随机森林，朴素贝叶斯算法和模型融合的算法基础。如果没有，我希望你先抽出一部分时间来了解一下他们，因为在本文中，我将指导你了解认识机器学习算法中关键的高级算法，也就是支持向量机的基础知识。

如果你是初学者，并且希望开始你的数据科学之旅，那么我希望你先去了解一些基础的机器学习算法， 支持向量机相对来说对于数据科学的初学者来讲的确有一点难了。

 

0.什么是分类分析

让我们用一个例子来理解这个概念。假如我们的人口是按照50％-50％分布的男性和女性。那么使用这个群体的样本，就需要创建一些规则，这些规则将指导我们将其他人的性别进行分类。如果使用这种算法，我们打算建立一个机器人，可以识别一个人是男性还是女性。这是分类分析的样本问题。我们将尝试使用一些规则来划分性别之间的不同。为简单起见，我们假设使用的两个区别因素是：个体的身高和头发长度。以下是样本的散点图。

图中的蓝色圆圈表示女性，绿色方块表示男性。图中的一些预期见解是：

我们人口中的男性的平均身高较高。

我们人口中的女性的头发较长。

如果我们看到一个身高180厘米，头发长度为4厘米的人，我们最好的分类是将这个人归类为男性。这就是我们进行分类分析的方法。

1.什么是支持向量机

“支持向量机”（SVM）是一种有监督的机器学习算法，可用于分类任务或回归任务。但是，它主要适用于分类问题。在这个算法中，我们将每个数据项绘制为n维空间中的一个点（其中n是你拥有的是特征的数量），每个特征的值是特定坐标的值。然后，我们通过找到很好地区分这两个类的超平面来执行分类的任务（请看下面的演示图片）。

支持向量只是个体观测的坐标。支持向量机是一个最好地隔离两个类（超平面或者说分类线）的前沿算法。

在我第一次听到“支持向量机”这个名字，我觉得这个名字听起来好复杂，如果连名字都这么复杂的话，那么这个名字的概念将超出我的理解。幸运的是，在我看了一些大学的讲座视频，才意识到这个算法其实也没有那么复杂。接下来，我们将讨论支持向量