sklearn技巧

最新推荐文章于 2022-01-02 23:29:24 发布

水墨小龙虾

最新推荐文章于 2022-01-02 23:29:24 发布

阅读量1.4k

点赞数 1

分类专栏： python 数据挖掘

本文链接：https://blog.csdn.net/jianhong1990/article/details/69523525

版权

python 同时被 2 个专栏收录

101 篇文章 1 订阅

订阅专栏

数据挖掘

6 篇文章 0 订阅

订阅专栏

分桶
1. 按照取值范围均分成几个区间

import pandas.core.algorithms as algos
import pandas as pd

bins = algos.quantile(numpy.unique(train_data[item]), numpy.linspace(0, 1, 10))
train_data[item] = pd.tools.tile._bins_to_cuts(train_data[item], bins, include_lowest=True)

按照分位数分成几个区间

train_data[item] = train_data[item].apply(own_bins,args=(train_data[item],))
def own_bins(x, origin_data):
    for i in range(0, 11, 1):
        if x <= origin_data.quantile(i*0.1):
            return i + 1
    return 10

按照4分位做最大值和最小值限制

print train_data[item].quantile(0.75)
print train_data[item].quantile(0.25)
upper = train_data[item].quantile(0.25) - 1.5 * (
train_data[item].quantile(0.75) - train_data[item].quantile(0.25))
lower = train_data[item].quantile(0.75) + 1.5 * (
train_data[item].quantile(0.75) - train_data[item].quantile(0.25))
train_data[item] = numpy.clip(train_data[item], upper, lower)
print train_data[item].describe()
print train_data[item].dtypes