Sklearn库中Kmeans聚类技术

Sklearn库中Kmeans聚类技术

###数据介绍:
现有1999年全国31个省份城镇居民家庭平均每人全年消费性支出的八个主
要变量数据,这八个变量分别是:食品、衣着、家庭设备用品及服务、医疗
保健、交通和通讯、娱乐教育文化服务、居住以及杂项商品和服务。利用已
有数据,对31个省份进行聚类。
###聚类目的:
通过聚类了解1999年各省份的消费水平在国内的情况


###实现过程:

1、导入相关模块

import numpy as np
from sklearn.cluster import KMeans

2、加载数据并清洗

def loadData(filePath):                #定义函数
    fr = open(filePath,'r+')           #打开文件采用‘r+’的方法
    lines = fr.readlines()             #读取文件的全部内容
    retData = []                       #定义数据列表
    retCityName = []                   #定义城市标签列表
    for line in lines:   
    #对数据进行清洗,去除空格,去除逗号              
        items = line.strip().split(",")
         #将城市标签放入列表,采用append方法
        retCityName.append(items[0])          
        retData.append([float(items[i]) for i in range(1,len(items))]) #将数据放入列表,此处定义一个列表解析式
    return retData,retCityName           #返回数据

3、主函数编写

if __name__ == '__main__':
    data,cityName = loadData('city.txt')     #调用以定义的loadData函数
    km = KMeans(n_clusters = 3)              #进行KMeans聚类,簇数设为3
    print(km)                                #打印聚类函数
    label = km.fit_predict(data)             #fit_predict():计算簇中心以及为簇分配序号,返回给label标签
    expenses = np.sum(km.cluster_centers_,axis = 1)    #按行来求和
    print(expenses)
#将城市按label分成设定的簇,将每个簇的城市输出,将每个簇的平均花费输出
    CityCluster = [[],[],[]]  #注意此处定义3个空列表为之前簇数设为3                           
    for i in range(len(cityName)):
        CityCluster[label[i]].append(cityName[i])
    for i in range(len(CityCluster)):
        print("Expenses:%.2f" % expenses[i])
        print(CityCluster[i])

###结果如下:
KMeans(algorithm=‘auto’, copy_x=True, init=‘k-means++’, max_iter=300,n_clusters=3, n_init=10, n_jobs=1, precompute_distances=‘auto’,random_state=None, tol=0.0001, verbose=0)

[ 3827.86588235 7754.65666667 5113.54 ]

Expenses:3827.87
[‘河北’, ‘山西’, ‘内蒙古’, ‘辽宁’, ‘吉林’, ‘黑龙江’, ‘安徽’, ‘江西’, ‘山东’, ‘河南’, ‘湖北’, ‘贵州’, ‘陕西’, ‘甘肃’, ‘青海’, ‘宁夏’, ‘新疆’]

Expenses:7754.66
[‘北京’, ‘上海’, ‘广东’]

Expenses:5113.54
[‘天津’, ‘江苏’, ‘浙江’, ‘福建’, ‘湖南’, ‘广西’, ‘海南’, ‘重庆’, ‘四川’, ‘云南’, ‘西藏’]

可看出KMeans将城市按消费水平分为了3类。

###完整代码如下:


# -*- coding: utf-8 -*-
"""
Created on Fri Aug 11 10:04:42 2017

"""

import numpy as np
from sklearn.cluster import KMeans


def loadData(filePath):
    fr = open(filePath,'r+')
    lines = fr.readlines()
    retData = []
    retCityName = []
    for line in lines:
        items = line.strip().split(",")
        retCityName.append(items[0])
        retData.append([float(items[i]) for i in range(1,len(items))])
    return retData,retCityName



if __name__ == '__main__':
    data,cityName = loadData('city.txt')
    km = KMeans(n_clusters = 3)
    print(km)
    label = km.fit_predict(data)
    expenses = np.sum(km.cluster_centers_,axis = 1)
    print(expenses)
    CityCluster = [[],[],[]]
    for i in range(len(cityName)):
        CityCluster[label[i]].append(cityName[i])
    for i in range(len(CityCluster)):
        print("Expenses:%.2f" % expenses[i])
        print(CityCluster[i])
  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
这是一道非常经典的聚类问题,可以使用K-means算法来解决。以下是一个大致的流程: 1. 导入数据并进行数据预处理,例如去除缺失值、对数据进行标准化等。 2. 确定K值,可以通过手肘法、轮廓系数、CH指数等方法来确定。 3. 使用K-means算法进行聚类,输出每个簇的质心、个数和城市名称。 4. 分析每个簇的特征,了解各个省份消费水平情况。 具体实现的步骤如下: 1. 导入数据并进行数据预处理: ``` import pandas as pd from sklearn.preprocessing import StandardScaler # 读取数据 data = pd.read_csv('data.csv') # 去除缺失值 data = data.dropna() # 对数据进行标准化 scaler = StandardScaler() data_scaled = scaler.fit_transform(data) ``` 2. 确定K值: 可以通过手肘法、轮廓系数、CH指数等方法来确定K值。下面以轮廓系数为例: ``` from sklearn.cluster import KMeans from sklearn.metrics import silhouette_score # 初始化轮廓系数和CH指数 silhouette_scores = [] ch_scores = [] # 确定K值的范围 k_range = range(2, 10) # 进行K-means聚类 for k in k_range: kmeans = KMeans(n_clusters=k, random_state=0) labels = kmeans.fit_predict(data_scaled) silhouette_scores.append(silhouette_score(data_scaled, labels)) ch_scores.append(kmeans.inertia_) # 绘制轮廓系数和CH指数的变化曲线 import matplotlib.pyplot as plt plt.plot(k_range, silhouette_scores, 'bo-', label='Silhouette Coefficient') plt.xlabel('Number of clusters') plt.ylabel('Silhouette Coefficient') plt.xticks(k_range) plt.legend() plt.show() ``` 根据绘制出来的轮廓系数变化曲线,可以选择轮廓系数最大的K值。 3. 使用K-means算法进行聚类: ``` # 使用K-means算法进行聚类 k = 3 kmeans = KMeans(n_clusters=k, random_state=0) labels = kmeans.fit_predict(data_scaled) # 输出每个簇的质心、个数和城市名称 for i in range(k): print('Cluster {}:'.format(i)) print('Centroid:', scaler.inverse_transform(kmeans.cluster_centers_[i])) print('Number of cities:', len(data[labels == i])) print('Cities:', list(data[labels == i]['city'])) ``` 4. 分析每个簇的特征: 可以通过绘制柱状图等方式来分析每个簇的特征。下面以绘制各消费层次城市数量的柱状图为例: ``` # 统计各消费层次城市数量 count = data.groupby(labels)['city'].count() # 绘制柱状图 plt.bar(count.index, count.values) plt.xticks(range(k)) plt.xlabel('Cluster') plt.ylabel('Number of cities') plt.show() ``` 这样就可以得到各簇消费层次城市数量的柱状图了。可以根据需要继续对其他变量进行分析。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Mr.late

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值