数据挖掘-数据预处理的简单流程

此流程是一种简单的写法,在其他具体问题分析时,需有自己的分析方法,具体情况具体分析。

  1. 查看train_data与test_data 的个特征列的直方图分布情况,去掉分布特差的特征(分布特别不一致的那种)。
    # 标准化后数据可视化
    for col in data_minmax.columns:
    plt.figure()
    plt.title(col)
    seaborn.distplot(data_minmax[col], label=‘minmax’)
    seaborn.distplot(train[col], label=‘train’)
    seaborn.distplot(test[col], label=‘test’)
    plt.legend()
    # plt.show()
    plt.savefig(‘IMAGE/minmax_{}.jpg’.format(col))
  2. 对剩余数据进行数据标准化
    preprocessing.minmaxsclar or Standard or minmax
    3.对某些特征进行正太分布处理,使其符合正太分布

4.特征选择,剔除掉方差过小的特征

  1. 尝试选择模型
  2. 进行模型的融合
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值