【数据挖掘】聚类分析的简要介绍

目录

一、什么是聚类分析？

二、聚类分析的重要性

三、聚类算法的种类

（一）基于划分聚类算法

（二）基于层次聚类算法

（三）基于密度聚类算法

（四）基于网格的聚类算法

（五）基于神经网络的聚类算法

（六）基于统计学的聚类算法

四、聚类分析的应用

---

一、什么是聚类分析？

聚类分析指将物理或抽象对象的集合分组为由类似的对象组成的多个类的分析过程，其目的是在相似的基础上收集数据来分类。

聚类类似于分类，但与分类的目的不同，是针对数据的相似性和差异性将一组数据分为几个类别。属于同一类别的数据间的相似性很大，但不同类别之间数据的相似性很小，跨类的数据关联性很低。聚类与分类的不同还在于，聚类所要求划分的类是未知的。

二、聚类分析的重要性

“物以类聚，人以群分”，这是人类几千年来认识世界和社会的基本能力，是从大数据中发现价值必须面对的一个普遍性、基础性问题，是认知科学作为“学科的学科”要解决的首要问题。

无论是政治、经济、文学、历史、社会、文化、还是数理、化工、医农、交通、地理、各行各业的大数据或宏观或微观的任何价值发现，无不借助于大数据聚类分析的结果，因此，数据分析和挖掘的首要问题是聚类，这种聚类是跨学科、跨领域、跨媒体的。大数据聚类是数据密集型科学的基础性、普遍性问题。

可以毫不夸张的讲，如果聚类算法都搞不明白，或者说没有“落地”的“实例”，那说在搞数据挖掘就纯粹是忽悠了。

人类的认知科学要想有所突破，首先就要在大数据聚类上去的突破，聚类是挖掘大数据资产价值的第一步。

三、聚类算法的种类

作为数据挖掘中很活跃的一个研究领域，聚类分析有多种算法。

（一）基于划分聚类算法

1、k-means：是一种典型的划分聚类算法，它用一个聚类的中心来代表一个簇，即在迭代过程中选择的聚点不一定是聚类中的一个点，该算法只能处理数值型数据

2、k-modes：K-Means算法的扩展，采用简单匹配方法来度量分类型数据的相似度

3、k-prototypes：结合了K-Means和K-Modes两种算法，能够处理混合型数据

4、k-medoids：在迭代过程中选择簇中的某点作为聚点，PAM是典型的k-medoids算法

5、CLARA：CLARA算法在PAM的基础上采用了抽样技术，能够处理大规模数据

6、CLARANS：CLARANS算法融合了PAM和CLARA两者的优点，是第一个用于空间数据库的聚类算法

7、Focused CLARAN：采用了空间索引技术提高了CLARANS算法的效率

8、PCM：模糊集合理论引入聚类分析中并提出了PCM模糊聚类算法

（二）基于层次聚类算法

1、CURE：采用抽样技术先对数据集D随机抽取样本，再采用分区技术对样本进行分区，然后对每个分区局部聚类，最后对局部聚类进行全局聚类

2、ROCK：也采用了随机抽样技术，该算法在计算两个对象的相似度时，同时考虑了周围对象的影响

3、CHEMALOEN（变色龙算法）：首先由数据集构造成一个K-最近邻图Gk ,再通过一个图的划分算法将图Gk 划分成大量的子图,每个子图代表一个初始子簇,最后用一个凝聚的层次聚类算法反复合并子簇，找到真正的结果簇

4、SBAC：SBAC算法则在计算对象间相似度时，考虑了属性特征对于体现对象本质的重要程度，对于更能体现对象本质的属性赋予较高的权值

5、BIRCH：BIRCH算法利用树结构对数据集进行处理，叶结点存储一个聚类，用中心和半径表示，顺序处理每一个对象，并把它划分到距离最近的结点，该算法也可以作为其他聚类算法的预处理过程

6、BUBBLE：BUBBLE算法则把BIRCH算法的中心和半径概念推广到普通的距离空间

7、BUBBLE-FM：BUBBLE-FM算法通过减少距离的计算次数，提高了BUBBLE算法的效率

（三）基于密度聚类算法

1、DBSCAN：DBSCAN算法是一种典型的基于密度的聚类算法，该算法采用空间索引技术来搜索对象的邻域，引入了“核心对象”和“密度可达”等概念，从核心对象出发，把所有密度可达的对象组成一个簇

2、GDBSCAN：算法通过泛化DBSCAN算法中邻域的概念，以适应空间对象的特点

3、OPTICS：OPTICS算法结合了聚类的自动性和交互性，先生成聚类的次序，可以对不同的聚类设置不同的参数，来得到用户满意的结果

4、FDC：FDC算法通过构造k-d tree把整个数据空间划分成若干个矩形空间，当空间维数较少时可以大大提高DBSCAN的效率

（四）基于网格的聚类算法

1、STING：利用网格单元保存数据统计信息，从而实现多分辨率的聚类

2、WaveCluster：在聚类分析中引入了小波变换的原理，主要应用于信号处理领域。（备注：小波算法在信号处理，图形图像，加密解密等领域有重要应用，是一种比较高深和牛逼的东西）

3、CLIQUE：是一种结合了网格和密度的聚类算法

（五）基于神经网络的聚类算法

1、自组织神经网络SOM：该方法的基本思想是--由外界输入不同的样本到人工的自组织映射网络中，一开始时，输入样本引起输出兴奋细胞的位置各不相同，但自组织后会形成一些细胞群，它们分别代表了输入样本，反映了输入样本的特征

（六）基于统计学的聚类算法

1、COBWeb：COBWeb是一个通用的概念聚类方法，它用分类树的形式表现层次聚类

2、AutoClass：是以概率混合模型为基础，利用属性的概率分布来描述聚类，该方法能够处理混合型的数据，但要求各属性相互独立

聚类分析是一种探索性的分析，在分类的过程中，人们不必事先给出一个分类的标准，聚类分析能够从样本数据出发，自动进行分类。聚类分析所使用方法的不同，常常会得到不同的结论。不同研究者对于同一组数据进行聚类分析，所得到的聚类数未必一致。

四、聚类分析的应用

1、商业

聚类分析被用来发现不同的客户群，并且通过购买模式刻画不同的客户群的特征。聚类分析是细分市场的有效工具，同时也可用于研究消费者行为，寻找新的潜在市场、选择实验的市场，并作为多元分析的预处理。

2、电子商务

聚类分析在电子商务中网站建设数据挖掘中也是很重要的一个方面，通过分组聚类出具有相似浏览行为的客户，并分析客户的共同特征，可以更好的帮助电子商务的用户了解自己的客户，向客户提供更合适的服务。

本文相关知识整理来源于网络。