层次聚类pythonscipy_原理+代码｜详解层次聚类及Python实现

前言

聚类分析是研究分类问题的分析方法，是洞察用户偏好和做用户画像的利器之一。聚类分析的方法非常多，能够理解经典又最基础的聚类方法 —— 层次聚类法(系统聚类) 的基本原理并将代码用于实际的业务案例是本文的目标，同时这也会为理解后续与聚类相关的推文如 K-Means 等打下基础是。

本文将详细介绍如何 利用 Python 实现基于层次聚类的客户分群，主要分为两个部分：

层次聚类详细原理介绍

Python 代码实战讲解

原理部分

原理介绍

既然它们能被看成是一类的，所以要么它们距离近，要么它们或多或少有共同的特征。拿到数据集后，直接根据特征或指标来将样本分类的做法其实更适合业务能力比较强的人或有了十分明确的指标如男女各一类等硬性要求，所以本文以样本之间的距离为聚类指标。为了能够更好地深入浅出，我们调整了一下学习顺序，将小部分数学公式往后放，先从聚类结果的显示与分析入手。

下面是有关层次聚类的几个常见问题。

1、为什么都说层次树是层次聚类法独有的聚类结果图？

因为树形图的横坐标会将每一个样本都标出来，并展示聚类的过程。几十个样本时候层次树就已经 “无法” 查看了，更何况成百上千的数据样本。

2、层次树是怎么建立的？建立的基本步骤？

其实层次树的建立过程表示的就是聚类的过程，只不过通过层次树我们可以看出类之间的层次关系(这一类与那一类相差多远)，同时还可以通过层次树决定最佳的聚类个数和看出聚类方式(聚类顺序的先后)

基本步骤比较简洁，只要短短的 3 步：

计算每两个观测之间的距离

将最近的两个观测聚为一类，将其看作一个整体计算与其它观测(类)之间的距离

一直重复上述过程，直至所有的观测被聚为一类

建立层次树的三个步骤虽然简洁，但其实也有令人迷惑的地方，所以为了让各位更好的从整体上去理解聚类过程而不是圄于细节，这里先直接放一个聚类过程图和对应的层次树

3、怎么从层次树中看出聚类过程？

这一个简短的问题中其实暗含不少门道，第一：**当两个点被分为一类时，是从横坐标出发向上延伸，后形成一条横杠；当两个类被分为一类时，是横杠中点向上延伸。**这第一点中，横杠的数量就表示当所有的点都被圈为一类的时候经过了多少次聚类。

同样，横杠距离横坐标轴的高度也有玄机，毕竟每生成一个横杠就表示又有一次聚类了，所以我们可以通过横杠的高度判断聚类的顺序，结合上图右半部分的圆圈和数字标号也可以看出。<